Nutanix 企 业 云 在 中 国 


di 
pul 


当 听 说 中 国 团队 正在 撰写 一 本 关于 Nutanix 架 构 和 实践 部 署 的 书 ， 我 融 迫 不 及 待 想 写 一 篇 推荐 序 给 读者 讲述 我 们 的 心得 体会 。 我 们 从 2012 年 起 进入 中 国 ， 那 时 也 是 公司 建立 的 早期 阶段 。 从 
那 时 起 ， 我 们 便 开始 不 断 增 加 新 的 企业 和 政府 客户 。 中 国 的 客户 和 合作 伙伴 促使 我 们 提高 安全 性 ， 实 现 远 程 管理 、 跨 区 域 复制 ， 提 供 售后 支持 ,做 好 界面 本 地 化 ， 同 时 降低 企业 云 的 总 拥有 成 
本 。 在 过 去 的 两 年 ， 我 们 将 联想 公司 纳入 承载 Nutanix 云 操作 系统 的 全 球 硬件 合作 伙伴 。 这 使 我 们 在 中 国 本 土 市 场 拥有 了 更 大 的 潜力 ， 尤 其 是 对 国有 企业 客户 来 说 。 


企业 云 的 历史 


20 世 纪 未 ， 在 阿里 巴巴 、 百度、 腾讯 、 亚 马 逊 、 脸 谱 、 谷 歌 等 互联 网 公司 的 数据 中 心里 ， 计 算 架 构 层 面 友 生 了 根本 的 改变 。 它 们 不 再 为 基础 架构 购买 有 特殊 功能 的 专 有 硬件 ， 所 有 的 基础 架 
构 都 是 可 编程 的 ， 以 纯 软 件 形式 在 商业 服务 器 运行 ， 并 可 根据 需求 通过 软件 而 非 人 为 干预 的 方式 实现 以 机 架 为 单位 的 堆 寺 扩展 ， 数 以 百 万 的 服务 器 都 由 定制 的 专 有 操作 系统 管理 。 在 2009 年 年 
底 ， 我 们 确认 要 为 企业 定制 此 类 它们 急需 的 操作 系统 。 有 挑战 的 是 ， 这 种 操作 系统 必须 无 颖 支持 企业 内 部 所 有 传统 应 用 ， 且 管理 极为 简单 ， 就 像 客户 使 用 苹果 iOS 设 备 一 样 。 一 键 式 消费 级 的 简 
易 是 我 们 的 核心 价值 观 ， 也 是 我 们 投入 大 量 成 本 用 于 用 尸体 验 、 用 户 界 面 设计 的 原因 。Nutanix 的 管理 系统 Prism 束 是 由 此 而 生 的 。 


超 融 合 基础 架构 : 2011-2020 


我 们 先 打 破 的 数据 中 心 硬件 是 存储 。 存 储 阵列 如 大 型 主机 系统 一 般 又 贵 又 庞大 ， 同 时 存在 管理 竖井 ， 要 求 管 理 人 员 精 通 诸如 传统 SAN 存 储 、HBA 卡 、 刀 片 服务 器 背 板 等 相关 硬件 的 专业 知 
识 。 存 储 需 要 以 应 用 为 中 心 、 应 用 感知 、 高 度 分 布 ， 并 运行 在 商业 服务 器 之 上 一 一 就 像 音 乐 作 为 “第 一 杀手 铀 的 应 用 ”融合 在 手机 里 ， 人 存储 同样 可 以 融合 在 计算 服务 器 之 中 。 据 奔 3AN 和 人 存储 阵 
列 是 数据 中 心 基础 架构 的 根本 变革 ， 同 时 也 是 建立 企业 下 一 代 计 算 平 台 的 架构 基础 。 


在 之 后 的 8 年 ， 我 们 扩展 了 HCI 的 疆界 ， 将 传统 昂贵 的 存储 才 有 的 高 端 功 能 纳入 了 Nutanix 的 HCI 之 中 ， 包 括 复 杂 功 能 的 实现 ， 如 性 能 、 复 制 、 容 量 优化 、 业 务 连 续 性 、 可 扩展 性 、 安 全 性 和 
数据 完整 性 。 由 于 磁盘 驱动 器 (HDD) 存储 介质 将 接力 棒 传 递 到 下 一 代 硅 忆 片 技术 ， 如 固态 内 存 和 非 易 失 性 存储 器 (NVMe) 存储 ，HCI 的 架构 以 及 “数据 本 地 化 ”概念 ， 即 应 用 程序 与 最 相关 
的 数据 相 邻 ， 变 得 不 可 或 缺 。 此 外 ， 由 于 数据 中 心 内 的 所 有 构成 都 基于 软件 ， 甚 至 需要 管理 数 十 亿 个 用 户 文 件 的 基于 硬件 的 文件 管理 器 都 必须 进行 软件 定义 并 自动 扩展 。 对 象 存 储 服务 也 是 如 
此 。 总 之 ， 与 存储 遵循 摩尔 定律 类 似 ， 随 着 摩尔 曲线 的 变化 ，HCI 的 创新 步伐 将 继续 加 快 。 


隐形 的 虚拟 化 、 网 络 和 安全 : 2015-2020 


在 2013 年 左右 ， 我 们 意识 到 通过 HCI 使 存储 隐形 并 不 是 终点 ， 而 是 实现 真正 隐形 基础 设施 旅程 中 的 一 个 里 程 碑 。 我 们 必须 努力 使 数据 中 心 的 其 他 组 件 完全 上 自动 化 并 一 键 式 启用 。 虚 拟 化 软件 
是 数据 中 心软 件 堆栈 中 非常 昂贵 的 一 层 ， 包 括 系统 管理 、 运 莒 管理 和 数据 中 心 自 动 化 软件 。 影 响 100 亿 到 150 亿 美元 的 行业 的 机 会 已 经 成 熟 了 。 我 们 知道 ， 必 须 将 虚拟 化 无 颖 地 融合 在 一 起 ， 就 
像 我 们 使 存储 “消失 ”一 样 。 它 要 在 预算 中 作为 一 个 单独 的 项 目 消 失 。 整 个 虚拟 化 团队 必须 融入 更 大 的 CloudOps 运 动 ， 因 为 我 们 努力 将 多 个 专家 团队 合并 为 一 体 。 类 似 于 公有 云 公 司 ， 我 们 在 
Linux 开 源 的 基础 上 构建 了 我 们 自己 的 Hypervisor，Nutanix AHV 和 Acroplis 因 此 诞生 。 我 们 的 企业 云 之 旅 已 经 开始 了 。HCI 已 经 成 为 我 们 产品 策略 同心 圆 内 的 最 内 图。 云 操作 系统 的 波纹 逐渐 向 
外 延伸 。 


自 2013 年 以 来 的 四 年 中 ，AHV 已 经 成 为 我 们 全 产品 堆栈 的 基石 。AHV 的 所 有 功能 包括 安全 性 、 资 源 调度 、 高 可 用 性 、1O 管 道 、 网 络 等 ， 均 是 完全 分 布 式 、 超 融合 和 横向 扩展 的 。 我 们 已 经 
实现 了 微分 段 、 服 务 链 、 软 件 加 密 和 合 规 性 自我 修复 ， 与 我 们 的 软件 定义 的 存储 功能 一 样 优越 。 到 2017 年 年 中 ， 这 个 云 操作 系统 已 经 部 署 在 核心 数据 中 心 、 远 程 和 分 支 机 构 、“ 前 沿 部 署 ” 边 界 
云 ， 如 石油 钻井 、 陆 军车 辆 、 海 军舰 艇 、 商 业 货 轮 、 制 造 业 工矿、 零售 商店 和 医院 等 。Nutanix 正 在 帮助 云 实现 离散 化 ， 我 们 从 根本 上 认为 云 架 构 未 来 将 变 成 分 布 式 的 。 


超 赵 虚拟 机 和 公有 云 


如 我 之 前 提 到 的 ， 云 操作 系统 必须 运行 在 半 机 柜 、 四 个 机 柜 、 四 十 个 机 柜 、 四 百 个 机 柜 到 四 干 个 机 柜 的 环境 中 。 两 个 法 则 基本 上 说 明了 为 什么 云 要 离散 在 超过 10 个 大 的 公有 云 数据 中 心 和 怎 
么 实现 这 一 点 。 


区 域 法 则 合 规 性 ， 数 据 主权 ， 计算 本 地 化 ， 区 域 治 理 
: 物理 法 则 数据 和 计算 的 本 地 化 ， 网 络 分 区 导致 的 故障 隔离 ， 离 线 操作 等 


离散 云 要 求 最 高 程度 的 自动 化 、 机 器 学 习 、 应 用 为 中 心 的 迁移 、 集 中 化 的 监控 和 编排 ， 以 及 可 视 化 。Nutanix 可 以 通过 Calm， 借 助 源 于 电子 商务 云 的 交易 市 场 的 概念 聚焦 在 高 度 可 视 化 的 以 
应 用 为 中 心 的 自动 化 引擎 上 。Calm 的 “蓝图 ”拥有 整合 ITOps 和 DevOps 的 潜力 ， 例 如 运 维 人 员 和 开发 人 员 可 以 (借助 Calm) 使 用 整个 应 用 模型 的 通用 语言 (进行 沟通 ) 。 由 于 云 的 “数据 平 
面 ” (包括 硬件 和 应 用 ) 逐渐 离散 化 ， 控 制 平 面 需要 集中 化 以 形成 云 应 该 具备 的 规模 经 济 。 集 中 化 的 控制 平面 正 是 Prism Central 打 下 基础 的 地 方 。 我 们 也 和 希望 以 快速 的 步伐 创新 以 期 达到 不 仅 
仅 是 “一 键 式 ”， 还 有 “ 零 接 触 ” 和 “ 零 服务 单 ”。 

另 一 个 不 断 激 发 我 们 的 领域 是 基于 Linux 的 容器 。 当 计算 单元 变 得 无 状态 化 ， 应 用 可 以 由 运行 在 虚拟 机 中 的 有 状态 服务 和 运行 在 容器 中 的 无 状态 、 更 加 短暂 的 (弹性 的 ) 服务 混合 而 成 。 我 
们 看 到 Kubernetes 也 是 一 个 在 Nutanix 内 外 持续 发 展 创新 的 领域 。 


自 有 还 是 租用 : Xi 的 旅程 


大 约 人 在 2015 年 年 底 ， 我 们 意识 到 隐形 基础 架构 的 真正 本 质 是 混合 云 模 式 ， 整 个 数据 中 心 可 以 在 其 中 呈现 隐形 。 现 在 ， 我 们 的 客户 不 仅 可 以 决定 使 用 自 有 设备 承载 可 预测 的 应 用 ， 还 可 以 决定 
通过 公有 云 服务 租用 共享 设备 应 对 弹性 的 和 不 可 预测 的 工作 负载 。 公 有 云 和 私有 云 融 为 一 体 的 思路 是 融合 的 最 终 疆 界 。 操 作 系统 需要 熔融 整个 的 网 络 、 安 全 模型 、 识 别 引 擎 、 计 算 、 和 存储 以 及 提 
供 单一 同 质 化 体验 的 控制 平面 ， 模 糊 目 有 和 租用 的 界限 。 我 们 也 从 中 国 客户 和 合作 伙伴 听 到 很 多 真知 灼 见 如 必须 整合 Capex 和 Opex 来 获取 最 大 伸缩 性 、Prism 需 要 将 公有 和 私有 融 为 一 体 、 
Acropolis 需 要 从 数据 中 心 解 耦 应 用 和 了 网络、Calm 需 要 假设 世界 将 变 成 多 云 模式 。 


这 是 Nutanix 在 未 来 十 年 的 旅程 ; 这 是 通 往 “ 长 城 ”的 旅程 ; 这 是 Xi 的 旅程 … 
Dheeraj Pandey 


Nutanix 联 合 创始 人 以 首 席 执行 官 


超 融合 是 近年 来 企业 数据 中 心中 备 受 推崇 的 技术 之 一 。 超 融合 技术 可 以 帮助 企业 实现 大 量 的 业务 与 技术 价值 ， 如 简化 数据 中 心 管理 、 提 高 应 用 响应 速度 、 降 低 总 体 拥 有 成 本 、 加 快 业务 系统 
的 上 市 时 间 。 超 融合 技术 适用 于 各 类 应 用 场景 ， 如 关键 应 用 系统 、 数 据 保护 、 桌 面 虚拟 化 、 大 数据 、 分 文 机 构 、 开 发 测试 场景 等 。 


近年 来 各 类 互联 网 应 用 被 用 户 广 泛 接受 ， 互 联网 企业 实现 了 在 低廉 成 本 建设 数据 中 心 的 情况 下 提供 大 量 用 户 接 入 使 用 的 能 力 ， 这 得 益 于 互联 网 数据 中 心 领 先 的 Web-Scale 架 构 。 而 如 果 使 用 
传统 数据 中 心 方案 来 满足 如 此 大 量 的 用 户 访问 是 难以 想象 的 。 


超 融合 与 传统 的 数据 中 心 架 构 不 同 ， 超 融合 摆脱 了 传统 三 层 架构 的 限制 与 束缚 ， 其 底层 设计 采用 领先 的 Web-scale 架 构 ， 让 数据 中 心 具 备 横 向 扩展 、 按 需 采 购 、 性 能 和 成 本 可 预测 、 高 性 能 


的 特点 。 


从 企业 和 角度 而 言 ， 在 引入 超 融 合 技 术 前 ， 需 要 对 自身 的 业务 需求 进行 梳理 ， 并 根据 业务 需求 对 超 融 合 产 品 和 资源 进行 选择 ， 不 适当 的 资源 配置 和 选 型 都 可 能 会 对 上 面 运行 的 业务 系统 造成 影 
响 。 同 时 ， 超 融合 作为 一 种 新 的 数据 中 心 架构 ， 数 据 中 心 建设 者 除了 需要 关心 超 融 合 系统 的 安装 、 配 置 、 部 署 之 外 ， 还 需要 对 日 后 的 运 维 和 管理 工作 量 进行 评估 ， 只 有 这 样 才 可 以 将 采用 超 融 合 
系统 的 风险 降 到 最 低 。 


此 外 ， 超 融合 技术 由 于 整合 了 以 往 服务 器 、 存 储 、 虚 拟 化 的 功能 角色 ， 因 此 ， 基 于 超 融 合 的 数据 中 心 在 运 维 管 理 方面 与 传统 架构 的 数据 中 心 有 着 明显 的 不 同 ， 对 于 那些 IT 职 责 有 着 明显 分 工 
的 IT 部 门 而 言 ， 甚 至 可 能 需要 对 现 有 的 IT 人 员 的 工作 职责 、 技 术 服 务 流 程 等 进行 重 构 。 


强 融 合 凭借 独 有 的 技术 优势 与 以 构 特 点 ， 可 以 适用 于 各 种 行业 和 使 用 场景 ， 但 是 完善 的 规划 设计 、 日 常 运 维 管理 仍然 不 可 或 缺 ， 只 有 这 样 企业 才 可 以 充分 利用 超 融 合 的 优势 来 提升 业务 能 
力 ， 从 而 提升 企业 的 竞争 力 。 
本 书 的 写作 目的 

随 痢 超 融 合 采用 率 的 不 断 欧 升 ， 包 括 传统 架构 提供 商 在 内 的 众多 企业 也 纷纷 加 入 超 融 合 市 场 ， 推 出 形态 不 一 的 超 融合 产品 ， 这 使 得 超 融 合 市 场 鱼 龙 混杂 ， 概 念 混乱 。 本 书 的 作者 团队 作为 国 
内 最 早 接触 超 融 合 的 技术 人 员 ， 和 希望 通过 本 书 分 享 对 超 融 合 技术 的 体会 和 理解 ， 并 帮助 读者 更 加 全 面 地 了 解 超 融 合 市 场 、 以 Nutanix 产 品 为 代表 的 超 融合 技术 和 解决 方案 。 
本 书 的 目标 读者 

本 书 适 用 于 希望 对 超 融 合 解决 方案 以 及 超 融 合 产品 有 深入 了 解 的 读者 ， 同 时 正在 筹备 、 参 与 超 融合 项 目 建 设 的 IT 人 员 也 可 以 将 本 书 作 为 Nutanix 超 融合 产品 安装 、 规 划 与 设计 、 部 署 与 测 
试 、 运 维 与 管理 的 参考 书目 。 
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第 1 草 ” 超 融合 系统 友 展 历程 及 概述 


随 着 IT 技术 的 迅猛 发 展 和 影响 范围 的 日 趋 扩 大 ， 尤 其 是 大 数据 和 互联 网 时 代 的 到 来 ， 传 统 的 IT 架构 面临 着 巨大 的 挑战 。 如 何 革新 架构 ， 使 其 更 好 地 满足 当下 以 及 未 来 的 数据 、 业 务 需 求 ， 是 
当前 IT 基础 以 构 的 核心 考量 。 


IT 技术 不 再 仅仅 是 政府 或 企业 所 关注 的 ， 它 已 潜移默化 地 改变 着 人 们 的 生活 及 工作 方式 。 以 前 ， 技 术 革 新 对 人 们 生活 的 影响 如 多 米 诺 骨牌 效应 般 慢 慢 茵 延 开 来 ; 而 现在 ， 技 术 革 新 扩散 和 蒙 
延 的 速度 却 近似 一 种 爆炸 式 的 形态 ， 这 一 切 背 后 的 重要 推手 就 是 IT 技术 的 快速 发 展 。 


数据 中 心 作 为 IT 行业 的 重要 组 成 部 分 ， 经 历 了 多 次 变革 ， 从 最 初 的 大 型 机 系统 逐步 演变 为 独立 的 服务 器 系统 ， 随 着 软件 技术 的 发 展 ， 又 开始 走向 分 布 式 的 云 架构 。 这 种 变化 是 IT 行业 发 展 的 
必然 结果 ， 当 这 种 结果 反作用 于 IT 行业 时 ， 也 会 推动 IT 行业 转变 天 注 焦点 并 让 IT 行业 走 上 精细 化 发 展 的 道路 。 数 据 中 心 作 为 IT 行业 发 展 的 重要 推动 力 ， 从 最 初 的 业务 文 撑 中 心 ， 逐 渐变 为 业务 的 
驱动 中 心 ; 数据 中 心 的 发 展 焦点 ， 不 再 是 有 多 大 空间 ， 可 放置 多 少 服务 器 和 存储 ， 而 是 能 支撑 多 大 规模 的 业务 ， 是 否 具备 敏捷 地 随 业 务 需求 而 动态 扩张 的 能 力 。 


基于 IT 技术 发 展 起 来 的 大 型 互联 网 企业 逐渐 代替 传 统 商业 公司 成 为 全 球 市 场 中 的 巨 无 霸 ， 如 谷歌 (Google) 、 亚 马 逊 (Amazon) 、 脸 谱 (Facebook) 、 百 度 (Baidu) 、 腾 讯 
(Tencent) 、 阿 里 巴巴 (Alibaba) 等 ， 这 些 企业 最 核心 的 资产 是 “数据 ”， 而 如 何 处 理 和 利用 这 些 “数据 ”， 正 是 数据 中 心 的 职责 所 在 和 核心 价值 的 体现 。 大 型 互联 网 企业 的 快速 崛起 正 是 
由 于 各 自 的 数据 中 心 具备 了 当前 IT 行 业 最 为 领先 的 技术 水 平 。 基 于 大 型 互联 网 企业 数据 中 心 的 最 佳 实践 ， 一 种 全 新 的 计算 理念 一 一 Web-Scale (互联 网 规模 扩展 架构 ) ， 正 逐步 成 为 当前 数据 中 
心 建设 的 一 个 参考 标准 。 而 基于 Web-Scale 理 念 形成 的 超 融 合 系统 包含 了 当前 及 未 来 一 段 时 间 内 数据 中 心 所 需 的 关键 技术 : 基于 机 器 学 习 的 智能 化 ， 分 布 式 自治 系统 ， 系 统 自 恢复 能 力 ， 基 于 
API 的 自动 化 及 分 析 能 力 。 


1.1 数据 中 心 的 演进 


TeRRBTTHEARA, (RIRACARASSHSSR PAA SRA abo, SURI BERRA ET, AERE, Bak ikme (SRA. MS SIRS 
不 开支 撑 其 运行 的 数据 中 心 基础 架构 。 


数据 中 心 由 各 类 服务 器 、 存 储 、 网 络 以 及 支持 这 些 组 件 运 行 的 电力 、 制 冷 等 设备 组 成 ， 提 供 了 应 用 所 需 的 网 络 、 计 算 、 存 储 这 三 项 最 为 重要 的 能 力 。 今 天 的 数据 中 心经 过 不 断 的 演化 ， 正 在 
告别 以 往 由 硬件 定义 的 模式 ， 逐 渐 形 成 由 软件 定义 的 智能 化 、 模 块 化 数据 中 心 架构 。 


在 最 近 20 年 数据 中 心 的 发 展 过 程 中 ， 数 据 中 心 染 构 的 变化 经 历 了 如 下 几 个 重要 阶段 ， 即 分 散 式 、 整 合式 、 虚 拟 化 、 融 合 系统 、 超 融合 (简称 HCI) 五 个 重要 阶段 ， 如 图 1-1 所 示 。 
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图 1-1 数据 中 心 架 构 演 进 
在 数据 中 心 发 展 初期 ， 服 务 器 主要 使 用 其 内 部 的 磁盘 或 外 部 的 直 连 存储 (DAS) ， 其 架构 如 图 1-2 所 示 。 


随 着 用 户 对 应 用 的 可 用 性 、 存 储 性 能 、 人 存储 容量 等 要 求 的 提高 ， 整 合式 的 数据 中 心 架 构 逐 渐变 成 主流 ， 数 据 中 心 的 存储 设备 由 直 连 存储 演变 为 集中 式 的 共享 存储 模式 ， 服 务 器 通过 HBA、 
SAN 交 换 机 、FC 线 缆 与 存储 设备 连接 ， 这 种 架构 的 推出 ， 有 效 地 提高 了 存储 可 用 性 、 利 用 率 、 人 存储 设备 的 可 管理 性 ， 再 加 上 操作 系统 及 应 用 程序 对 于 集群 功能 的 支持 (如 Windows 集 群 功能 、 
SQL server 集 群 服务 等 ) ， 应 用 的 可 用 性 也 随 之 提高 。 整 合式 的 数据 中 心 架构 如 图 1-3 所 示 。 


各 类 组 织 对 于 IT 技术 寄予 厚望 ， 应 用 程序 及 其 用 户 数量 随 之 增加 ， 数 据 中 心 内 的 服务 器 设备 也 变 得 越 来 越 多 ， 数 据 中 心 空间 与 电力 不 足 、 较 低 的 服务 器 资源 利用 率 、 不 同 的 服务 器 品牌 和 型 
号 让 数据 中 心 的 管理 运 维 变 得 不 堪 重 负 。 服 务 器 虚拟 化 技术 的 引入 整合 了 服务 器 资源 ， 有 效 地 减少 了 服务 器 设备 的 蔓延 ， 应 用 程序 被 封装 在 虚拟 机 中 运行 ， 用 户 获得 与 物理 服务 器 运行 应 用 程序 
时 一 致 的 使 用 体验 ， 同 时 还 能 提高 资源 利用 率 和 运 维 效率 。 但 这 一 类 型 的 数据 中 心 架构 ， 仪 仪 是 在 服务 器 上 实施 了 虚拟 化 ， 是 服务 器 虚拟 化 技术 与 整合 式 数 据 中 心 架 构 的 晋 加 ， 服 务 器 与 存储 之 
间 使 用 的 仍然 是 三 层 架 构 ， 如 图 1-4 所 示 。 
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图 1-2 分散 式 的 数据 中 心 架构 
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图 1-3 ”整合 式 数据 中 心 架 构 
得 益 于 虚拟 化 技术 的 引入 ， 数 据 中 心 内 的 服务 器 数量 得 到 一 定 程度 的 控制 ， 但 虚拟 机 数量 的 膨胀 与 超 配 消耗 了 巨大 的 存储 空间 ， 这 使 得 数据 中 心 内 的 存储 设备 数量 逐年 递增 ， 占 用 大 量 空 
间 ， 消 耗 越 来 越 多 的 成 本 。 传 统 的 存储 设备 受 限 于 其 架构 ， 无 法 提供 灵活 的 纵向 及 横向 扩展 能 力 。 
在 上 述 情况 下 ，IT 供 应 商 推出 了 融合 系统 (也 称 集成 系统 ) 方案 ， 将 服务 器 、 存 储 设 备 、 存 储 交 换 机 、TOR 网 络 交换 机 放置 在 同一 个 机 架 中 以 模块 方式 销售 ， 并 人 在 设备 出 厂 前 进行 兼容 性 验 
证 和 设备 的 预 配置 ， 同 时 针对 特定 工作 负载 进行 测试 验证 ， 这 种 模块 化 、 标 准 化 的 方式 减少 了 用 户 侧 的 部 署 时 间 ， 降 低 了 用 户 自行 进行 集成 的 复杂 度 。 当 用 户 需要 扩 容 时 ， 可 以 通过 堵 加 模块 的 
方式 进行 横向 扩展 。 其 架构 如 图 1-5 所 示 。 
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图 1-5 融合 系统 架构 


融合 系统 的 机 架 中 包含 了 一 个 或 多 个 供应 商 的 产品 组 件 ， 这 些 组 件 并 不 是 专 为 融合 系统 设计 的 ， 供 应 商 通 过 硬件 堆砌 以 及 软件 集成 的 方式 包 妆 解决 方案 ， 但 是 在 最 终 的 集成 度 上 并 没有 得 到 
预想 的 效果 。 此 外 ， 用 户 的 应 用 干 差 万 别 ， 融 合 系统 更 多 的 是 为 标准 化 的 应 用 负载 设计 (如 虚拟 化 服务 器 、 虚 拟 桌 面 、Web 服 务 器 等 ) ， 针 对 非 标准 化 、 混 合 型 应 用 负载 的 表现 并 不 理想 。 此 
外 ， 供 应 商 以 机 架 为 单位 进行 销售 ， 如 果 用 户 的 IT 规模 用 不 上 一 个 模块 或 者 用 户 希 望 以 更 小 的 颗粒 进行 横向 扩展 ， 融 合 系统 的 使 用 就 会 受到 诸多 限制 。 


此 外 ，IT 部 门 仍然 要 面 对 虚 拟 化 管理 的 复杂 性 ， 虚 拟 机 泛滥 导致 资源 浪费 ， 应 用 堆栈 增多 导致 出 现 故 障 后 故障 定位 和 排 错 变 得 困难 ， 存 储 设备 因为 不 能 支持 虚拟 机 感知 而 无 法 直观 显示 虚拟 
机 性 能 数据 等 。 


由 于 服务 器 、 存 储 网 络 、 集 中 式 共享 存储 构成 的 三 层 架 构 在 性 能 、 成 本 、 可 靠 性 、 可 管理 性 、 扩 展 性 等 方面 存在 诸多 问题 ， 使 得 以 Nutanix (路 坦 力 ) 为 代表 的 HCI 解 决 方案 迅速 发 展 。 
Nutanix 的 HCI 解 决 方案 带 来 了 基础 架构 平台 的 革命 性 变化 ， 方 案 通 过 软件 定义 的 方式 降低 了 物理 环境 的 复杂 度 ， 内 置 的 管理 平台 提升 了 平台 整体 的 运 维 能 力 ， 如 图 1-6 所 示 。 
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图 1-6 ”HCI 架构 


超 融 合 系统 通过 集成 虚拟 化 、 计 算 、 存 储 及 网 络 技术 ， 握 弃 了 三 层 架 构 固 有 的 问题 ， 支 持 以 更 小 的 颗粒 (一 次 只 需 添 加 一 个 节操 ) 进行 横向 扩展 ， 并 通过 分 布 式 架构 、 软 件 定义 技术 及 自修 
复 等 功能 提供 更 高 的 可 用 性 和 可 扩展 性 ， 这 使 其 很 快 成 为 众多 数据 中 心 建设 者 在 新 建 、 更 新 数据 中 心 时 的 首选 方案 。 


1.2 ERORIA 


在 开始 介绍 超 融合 系统 之 前 ， 有 必要 对 超 融合 系统 的 前 身 即 融合 系统 进行 介绍 。 


融合 系统 也 称 集成 系统 ， 是 数据 中 心 随 着 技术 友 展 而 产生 的 一 种 参考 方案 架构 。 从 字面 意思 来 看 ， 融 合 就 是 将 两 个 或 多 个 组 件 组 合 在 一 起 ， 形 成 一 个 融合 的 单元 。 业 界 对 于 融合 系统 并 无 一 
个 统一 的 标准 定义 。 但 维基 百科 中 对 于 融合 系统 的 定义 比较 具有 代表 性 : “融合 系统 是 由 一 组 不 同 的 |T 组 件 封装 成 为 一 个 统一 、 优 化 的 计算 单元 ， 这 些 不 同 的 IT 组 件 可 能 包含 服务 器 、 存 储 设 
备 、 网 络 设备 及 系统 软件 等 ， 以 便于 实现 IT 基 础 架构 的 管理 、 自 动 化 及 编排 配置 。” 


从 维基 百科 的 定义 中 不 难看 出 : 首先 ， 融 合 系统 包含 了 传统 IT 基础 架构 中 的 一 个 或 多 个 组 件 ， 如 服务 器 、 人 存储 设备 或 网 络 设备 等 ; 其 次 ， 融 合 系统 不 应 是 简单 的 硬件 设备 堆砌 ， 而 应 该 具备 
一 定 的 预 配置 能 力 ; 最 后 ， 融 合 系统 在 管理 上 应 该 具有 所 包含 资源 的 集中 管控 能 力 ， 并 提供 一 个 统一 的 控制 面板 。 


融合 系统 上 述 三 层 内 涵 有 着 一 个 共同 的 目的 ， 即 降低 上 T 基 础 架构 的 复杂 度 、 提 升 部 署 及 维护 效率 。 
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图 1-7 资源 角色 的 逻辑 分 层 


如 图 1-7 所 示 ， 任 何 上 T 系 统 都 可 以 按照 如 下 三 层 进行 分 类 定义 ， 我 们 熟知 的 各 个 IT 组 件 都 可 以 归 类 到 “资源 消费 者 ” “资源 协调 者 ”以 及 “资源 供给 者 ”三 种 角色 当中 ， 每 个 组 件 与 其 他 组 
件 间 的 协作 束 是 我 们 融 知 的 集成 能 力 ， 融 合 系统 融 是 将 传统 IT 以 构 中 的 各 个 组 件 进 行 集成 ， 提 升 组 件 间 的 协作 效率 、 降 低 协作 成 本 ， 进 而 实现 上 IT 系统 服务 能 力 的 最 大 化 。 按 照 IT 技 术 架 构 的 优化 
原则 ， 对 不 同 角色 的 IT 组 件 进行 深度 优化 和 集成 ， 实 现 系统 整体 的 优化 ， 将 资源 最 大 程度 地 供应 给 消费 者 使 用 ， 可 以 获得 最 大 产 出 。 


融合 系统 架构 也 同样 遵循 上 述 的 技术 架构 优化 原则 ， 将 提供 计算 资源 的 服务 器 、 提 供 数据 人 存储 资源 的 存储 系统 和 提供 网 络 资源 的 网 络 系统 这 些 “资源 供给 者 ”进行 堆砌 。 这 种 通过 硬件 设备 
到 加 来 实现 的 模块 化 方案 ， 作 为 融合 系统 的 初期 版 本 ， 实 质 是 以 物理 形态 为 主 的 融合 系统 。1T 供 应 商 通 音 通 过 整 机 柜 式 数据 中 心 的 概念 ， 将 传统 的 标准 服务 器 、 和 存储 设备 和 网 络 设备 放置 在 一 个 
标准 机 柜 中 ， 打 包 出 售 给 用 户 。 这 种 融合 系统 可 以 解决 设备 选 型 和 物理 部 署 配置 上 的 一 些 问题 ， 但 从 IT 基础 架构 管控 层面 与 传统 的 IT 基础 架构 相 比 并 无 区 别 。 


虚拟 化 技术 被 用 己 接受， 等 于 在 “资源 协调 者 ”层面 有 了 优化 集成 的 载体 ， 融 合 系统 供应 商 借助 虚拟 化 的 能 力 对 原 有 的 融合 系统 进行 升级 ， 在 物理 形态 的 融合 系统 基础 上 预 配置 了 虚拟 化 
层 ， 融 合 系统 开始 进入 硬件 与 软件 集成 的 模式 。 这 类 产品 包括 大 家 所 熟知 的 VCE 推 出 的 vBlock 系 统 、Dell 推 出 的 vstart 系 统 、Cisco 联 合 NetApp 推 出 的 Flexpod， 等 等 。 这 一 类 型 的 融合 系统 ， 
已 经 不 再 是 通过 硬件 堆砌 实现 简单 物理 形态 的 融合 ， 而 是 友 展 成 硬件 和 软件 系统 集成 形态 的 融合 ， 相 较 于 传统 上 架构， 这 一 类 融合 系统 提供 了 更 为 全 面 的 预 配置 能 力 ， 大 大 降低 了 规划 和 选 型 复 
杂 度 ， 通 过 预 集成 ， 提 高 了 交付 和 配置 效率 ， 预 置 的 管理 平台 在 一 定 程度 上 实现 了 IT 资源 的 集中 管控 。 但 此 类 融合 系统 所 采用 的 硬件 设备 或 软件 系统 仍 是 基于 传统 架构 设计 或 开 上 友 的 ， 无 论 是 在 
采购 还 是 在 运行 过 程 中 ， 同 样 存 在 传统 上 T 基 础 以 构 所 面临 的 资源 浪费 、 性 能 瓶颈 或 者 过 度 投资 等 问题 。 


出 现 硬件 与 软件 集成 的 融合 系统 之 后 ， 有 一 段 时 间 的 相对 稳定 期 ， 很 多 融合 系统 厂商 开始 细 分 融合 系统 的 应 用 场景 ， 也 就 是 在 “资源 消费 者 ”层面 进行 深耕 细作 ， 逐 渐 出 现 了 各 种 基于 应 用 
系统 深度 集成 的 融合 系统 ， 如 面向 数据 库 应 用 的 融合 系统 、 面 向 SAP 应 用 的 融合 系统 、 面 向 Hadoop 集 群 的 融合 系统 等 。 但 是 |T 架 构 本 身 并 未 得 到 根本 性 的 革新 。 


随 着 融合 系统 市 场 的 成 长 ， 第 三 方 研究 机 构 1DC 及 Gartner 也 开始 对 融合 系统 进行 定义 及 分 类 。 根 据 IDC 及 Gartner 发 布 的 官方 报告 ， 两 者 对 融合 系统 的 分 类 如 下 : 
- IDC 将 融合 系统 (Converged System) 分 为 三 类 ， 分别 是 : 
- 集成 系统 (Integrated System) 
. 认证 参考 系统 (Certified Reference System) 
. 超 融 合 系统 (Hyperconverged System) 
Gartner 则 将 融合 系统 称 为 集成 系统 (Integrated System) ， 分 为 四 类 ， 分 别 为 : 
- 集成 基础 设施 系统 (Integrated Infrastructure System) 
- 集成 参考 架构 系统 (Integrated Reference Architecture System) 
- 集成 堆栈 系统 (Integrated Stack System) 
AE Bh MAB (Hyperconverged Integrated System) 


从 上 述 分 类 中 不 难看 出 ，Gartner 对 于 融合 系统 的 界定 相 比 1DC 更 为 细致 ， 因 此 ， 接 下 来 笔者 将 参照 Gartner 对 融合 系统 的 分 类 进行 简要 介绍 : 


- 集成 基础 设施 系统 : 将 服务 器 、 存 储 及 网 络 硬件 集成 在 一 起 ， 提 供 一 个 共享 的 计算 基础 设施 ， 如 VCE 的 vBlock 系 统 和 HPE Converged System700。 
集成 参考 架构 系统 : 由 一 家 或 多 家 供应 商 所 认证 的 一 组 具有 特定 规格 的 包含 了 多 个 硬件 或 软件 系统 的 产品 集合 (理想 情况 下 ， 由 同一 家 供应 商 提 供 服务 支持 ) ， 所 有 列 出 的 集成 系统 均 可 


被 视 为 参考 架构 ， 如 Cisco 与 NetApp 推 出 的 FlexPod 数 据 中 心 解决 方案 中 包含 了 Cisco UCS 服 务 器 、Cisco Nexus 交 换 机 以 及 NetApp FAS 存 储 ， 各 服务 器 厂商 基于 VMware VSAN 推 出 的 VSAN Ready 


Node 等 。 
集成 堆栈 系统 : 将 服务 器 、 存 储 和 网 络 硬件 与 应 用 软件 集成 ， 以 提供 应 用 一 体 机 或 类 似 应 用 一 体 机 的 功能 ， 例 如 Oracle Exadata 或 Teradata。 


超 融 合集 成 系统 : 紧密 地 将 计算 、 存储 和 网 络 硬 件 结合 在 一 起 ， 且 无 须 传统 的 存储 系统 (SAN) ; 数据 存储 功能 以 及 备份 、 恢 复 、 复 制 、 重 复数 据 删 除 及 数据 压缩 等 功能 均 包 含 在 管理 软 
件 或 集成 硬件 中 ， 与 计算 能 力 统 一 交付 。 主 要 的 供应 商 有 Nutanix、Scale Computing. Cisco HypetFlex 和 HPESimpliVity 等 。 


了 解 了 融合 系统 的 定义 与 分 类 后 ， 以 下 将 对 超 融 合 系统 进行 介绍 。 


超 融 合 系统 (Hyperconverged System) 或 超 融合 基础 设施 (Hyper-Converged Infrastructure) 这 一 概念 最 早 由 谁 提出 ， 难 以 考证 ， 而 且 目 前 仍 未 形成 一 个 严格 的 标准 定义 。 经 笔者 调 
查 ， 第 一 套 超 融合 系统 由 Nutanix 于 2011 年 推出 ， 并 使 用 了 融合 基础 设施 来 归 类 该 产品 。 随 着 超 融合 市 场 热度 的 提升 ， 无 论 是 新 兴 厂 商 还 是 老牌 厂商 都 陆续 推出 各 自 的 超 融合 系统 产品 。 于 是 各 
厂商 和 机 构 都 对 超 融 合 系统 给 出 了 各 自 的 定义 : 


: Nutanix: 超 融 合 架构 是 指 在 同一 套 设备 单元 中 除 具 备 计算 、 网 络 、 存 储 和 虚拟 化 能 力 之 外 ， 还 具备 数据 备份 、 快 照 技 术 、 重 复数 据 删除 、 在 线 数据 压缩 等 特性 ， 且 多 套 设备 单元 可 以 通过 


网 络 聚合 起 来 ， 实 现 模 块 化 的 无 颖 横向 扩展 ， 形 成 统一 的 资源 池 ， 并 通过 统一 的 管理 系统 进行 管控 。Nutanix 认 为 超 融 合 架 构 (HCI) 仅仅 是 通 往 企 业 云 架构 的 一 个 阶段 。 


‘IDC: 超 融 合 系统 是 集成 系统 新 兴 的 一 个 分 支 ， 将 计 兽 、 存 储 、 网 络 功能 整合 到 单一 的 软件 解决 方案 或 物理 设备 中 ， 封 装 为 单一 的 、 高 度 集 成 化 的 解决 方案 。 与 传统 IT 基 础 设施 的 不 同 点 
在 于 ， 超 融合 系统 实现 了 不 同 资源 类 型 的 深度 集成 ， 并 由 系统 供应 商 提供 统一 的 服务 支持 。 


: Gartner: 超 融 合集 成 系统 是 指 ， 紧 密 地 将 计算 、 存 储 和 网 络 硬件 结合 在 一 起 ， 且 无 须 传 统 的 存储 系统 (SAN) ; 数据 存储 功能 以 及 备份 、 恢 复 、 复 制 、 重 复数 据 删 除 及 数据 压缩 等 功能 ， 
均 已 包含 在 管理 软件 或 集成 到 硬件 中 ， 与 计算 能 力 统一 交付 。 


虽然 有 不 同 的 定义 标准 ,但 大 家 基本 形成 了 一 个 统一 的 共识 ， 即 超 融 合 系统 是 一 个 软件 定义 、 可 灵活 配置 、 随 需 扩容 的 全 堆栈 IT 基础 设施 ， 可 以 包含 但 不 限于 如 下 组 件 : 
- 标准 化 的 COTS (Commercial-Off-The-Shelf) 硬件 环境 

软件 定义 计算 (Hypervisor) 

C 软件 定义 存储 (SDS) 


- 软件 定义 网 络 (SDN) 


: 统一 的 管理 控制 中 心 (Management System) 
上 述 各 组 件 间 解 厢 ， 可 以 灵活 组 合 ， 随 需 配 置 ， 所 有 组 件 均 实现 完全 分 布 式 ， 不 存在 任 一 单 点 故障 。 


对 比 之 前 融合 系统 的 定义 及 不 同 分 类 ， 可 以 友 现 超 融 合 系统 区 别 于 其 他 融合 系统 架构 最 主要 的 特点 之 一 ， 就 是 将 其 他 融合 架构 中 仍 需 要 外 部 存储 控制 器 实现 的 数据 存储 能 力 ， 转 化 为 通过 软 
件 定 义 的 方式 来 实现 。 所 以 ， 可 以 将 超 融合 系统 出 现 之 前 的 融合 系统 统称 为 物理 融合 架构 ， 相 较 于 超 融 合 架构 ， 两 者 之 间 的 架构 差异 如 图 1-8 所 示 。 
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图 1-8 物理 融合 架构 与 超 融 合 架 构 示 意图 
超 融合 系统 通过 软件 重新 定义 了 资源 的 角色 和 功能 ， 打 破 了 物理 架构 的 约束 ， 实 现 数据 管理 和 业务 运行 高 效 性 的 同时 ， 提 高 了 架构 灵活 性 。 


正 是 由 于 超 融 合 系统 自身 所 具备 的 染 构 优势， 能 够 市 来 非常 明显 的 客户 价值 ， 因 此 在 互联 网 企业 的 大 型 数据 中 心中 被 广泛 采用 ， 以 实现 计算 、 存 储 和 网 络 资源 的 快速 部 署 、 统 一 管理 、 灵 活 
调度 以 及 上 自动化 运 维 ， 为 数据 中 心 帝 来 前 所 未 有 的 运行 效率 、 业 务 灵 活性 、 系 统 弹 性 、 规 模 以 及 最 优 成 本 。 


超 融合 系统 正在 逐步 蔡 代 传统 服务 器 加 集中 式 共 享 存 储 的 系统 架构 ， 并 通过 软件 定义 的 方式 ， 使 得 硬件 架构 变 得 更 加 清晰 简单 ， 进 而 简化 了 IT 系统 的 设计 复杂 度 ， 所 以 在 考虑 超 融合 系统 
时 ， 不 应 仪 仪 把 超 融 合 系统 视 为 传统 存储 系统 的 蔡 代 产品 ， 因 为 软件 定义 人 存储 仪 是 超 融 合 系统 的 一 个 组 成 部 分 ， 超 融合 系统 的 作用 是 为 多 种 业务 应 用 场景 和 不 同 工 作 负载 提供 综合 解决 方案 。 作 
为 超 融合 系统 领域 的 领导 者 厂商 ，Nutanix 对 超 融 合 系统 的 天 然 优势 做 了 如 下 的 总 结 : 


FREI: 改变 采购 模式 ， 无 须 一 次 性 大 规模 采购 ， 按 需 购买 ， 保 护 现 有 投资 ; 

` 快速 交付 : 从 上 机 架 开 始 1 小 时 内 即 可 交付 使 用 ， 部 署 快 捷 ; 

. 简化 管理 : 单一 界面 ， 统 一 管理 计算 、 存 储 、 虚 拟 化 等 资源 ， 运 维 管理 简单 化 ，; 

弹性 扩展 : 分 布 式 架构 ， 线 性 扩展 ， 无 节点 数 限制 ， 无 单 点 故障 ， 内 置 本 地 备份 、 同 城 和 异地 容 灾 能 力 ; 

. 开放 兼容 : 支持 多 种 Hypervisor， 并 提供 灵活 开放 的 硬件 、Hypetvisot 选 择 ， 满 足 用 户 不 同业 务 服务 等 级 的 技术 与 成 本 要 求 ; 
. 技术 先进 : 单一 架构 可 支持 虚拟 机 、 容 器 及 云 原生 应 用 ， 并 提供 原生 的 公有 云 连接 能 力 ; 


. 单一 文 持 : 单一 厂商 保障 所 有 软 硬 件 ， 提 供 包 括 计 算 、 存 储 和 虚拟 化 的 支持 。 


1.3” 超 融合 市 场 格 局 


正 是 由 于 上 文 提 及 的 超 融 合 系统 的 优势 ， 使 得 超 融合 系统 成 为 当下 热门 的 技术 领域 ， 众 多 IT 厂商 都 陆续 推出 各 自 的 超 融合 系统 产品 或 解决 方案 ， 本 节 依 据 第 三 方 研究 机 构 相 关 报 告 中 的 排名 
对 国内 外 主流 的 超 融合 系统 进行 简要 介绍 。 


- Nutanix: 成 立 于 2009 年 ， 自 2011 年 以 来 一 直 是 超 融 合 系统 市 场 及 技术 领域 的 领导 者 厂商 ， 占 据 全 球 超 融 合 系统 市 场 份额 的 50% 以 上 ， 拥 有 遍布 全 球 100 多 个 国家 的 6200 多 家 客户 。Nutanix 
在 2016 年 9 月 完成 IPO ， 成 为 第 一 家 上 市 的 超 融 合 系统 厂商 。 经 过 持续 的 研发 投入 ，Nutanix 逐 步 从 超 融合 系统 迈 向 数据 中 心 整 体 解决 方案 一 企业 云 架 构 ， 其 提供 了 完整 的 Acropolis 和 Prism 方 
案 ， 包 括 Acropolis Hypervisor (AHV) . Acropolis File Services (AFS) . Acropolis Block Services (ABS) 和 Acropolis Container Services (ACS) 等 功能 ， 并 推出 了 基于 机 器 学 习 、 具 有 X-Fit 专 利 的 
企业 云 管理 平台 Prism Pro。Nutanix 除 了 自 有 的 NX 系列 超 融 合 系统 之 外 ， 还 与 Dell、 联 想 签订 了 全 球 OEM 协 议 ， 共 同 推出 了 Dell XC 系列 及 联想 HX 系列 超 融 合 系 统 ， 并 通过 系统 认证 的 方式 ， 对 
HPE Proliant 系 列 服务 器 及 Cisco UCS 系 列 服务 器 提供 超 融合 系统 的 支持 。 


: SimpliVity (HPE) : 成 立 于 2009 年 ， 是 超 融 合 系 统领 域 的 重要 厂商 ， 于 2016 年 2 月 被 HPE 收 购 ， 收 购 之 前 ，SimpliVity 提 供 了 名 为 OmniStack 的 数据 虚拟 化 平台 ， 并 使 用 基于 PCI-E 接 口 的 
FPGA 硬 件 加 速 卡 提供 数据 加 速 。 除 了 自 有 的 OmniCube 一 体 机 设备 产品 之 外 ，SimpliVity 与 Cisco、 联 想 和 Dell 签 订 了 OEM 协 议 ， 提 供 了 基于 后 者 服务 器 硬件 的 OmniStack 超 融合 系统 。 在 HPE 宣布 
收购 SimpliVity 之 后 ， 上 述 OEM 协 议 延 续 情况 并 不 明朗 。 根 据 HPE 及 SimpliVity 官 方 网 站 发 布 的 最 新 消息 ，SimpliVity 原 有 产品 线 将 与 HPE 原 有 的 超 融 合 产 品 线 进行 整合 ， 面 向 客户 推出 HPE 
SimpliVity 380、 基 于 HPE StoreVirtual VSA 的 HPE HC 380 和 HPE HC 250 三 个 HPE 超 融合 系统 产品 ，SimpliVity 将 不 再 对 外 提供 超 融 合 系统 产品 。 


Pivot3: 成 立 于 2003 年 ， 专 注 于 全 闪存 超 融 合 系统 ， 在 2016 年 1 月 收购 了 NexGen Storage 公 司 ， 并 将 后 者 的 动态 全 闪存 阵列 产品 集成 到 其 超 融合 系统 方案 中 ， 于 2016 年 6 月 推出 了 全 新 版 本 的 


VvSTAC 超 融合 系统 ， 提 供 vSTAC SLX 50, vSTAC SLX 1004evSTAC SLX 200 三 种 配置 的 超 融 合 型 号 ， 每 个 集群 均 可 提供 三 个 节点 的 HCI 混 合 设备 和 一 个 基于 NexGen 全 闪存 阵列 的 N5 全 闪存 设备 。 


此 外 ，Pivot3 也 通过 OEM 协 议 的 方式 与 Cisco、Dell 及 联想 合作 ， 推 出 其 认证 的 超 融 合 系 统 方案 。 


: Dell: 作为 老牌 的 IIT 厂 商 ，Dell 与 EMC 合 并 之 后 ， 超 融合 系统 产品 线 变 得 更 为 丰富 ， 是 目前 最 为 全 面 的 基础 设施 供应 商 之 一 。 除 了 Dell 和 Nutanix 合 作 推 出 的 XC 系列 产品 之 外 ， 又 整合 了 
源 自 EMC 的 基于 VMware VSAN 的 VxRack 和 VxRail 系 列 产 品 ， 其 中 Dell XC 系列 继承 了 Dell PowerEdge 服 务 器 与 Nutanix 超 融合 系统 的 优势 ， 成 为 Dell 在 全 球 超 融 合 系统 市 场 的 强势 产品 ， 与 来 自 EMC 
的 VxRail 产 品 形成 互补 ， 前 者 涵盖 了 数据 中 心 大 部 分 业务 场景 ， 而 后 者 则 专注 于 基于 VMwate 平 台 的 应 用 场景 ， 使 得 Dell 在 全 球 超 融 合 系 统 市 场 成 为 最 为 全 面 的 供应 商 之 一 。 


. 联想 : 兼顾 个 人 与 企业 IT 服务 的 IT 厂商 ， 在 并 购 了 IBM System x 系 列 服务 器 产品 线 之 后 ， 在 全 球 服务 器 市 场 份 额 持 续 领 先 ， 是 目前 最 为 全 面 的 IT 基础 设施 供应 商 之 一 。 超 融合 系统 作为 数 
据 中 心 热点 ， 联 想 也 积极 涉足 该 领域 ， 除 了 推出 自 有 产品 之 外 ， 也 通过 与 其 他 超 融合 系统 厂商 签订 OEM 协 议 方 式 合作 ， 其 中 最 为 成 功 的 是 与 Nutanix 合 作 推出 的 联想 HX 系 列 产品 ， 该 系列 产品 基 
于 System x 系 列 服务 器 和 Nutanix 超 融合 系统 ， 继 承 了 两 者 的 优势 ， 成 为 目前 超 融 合 系统 市 场 竞 争 力 突出 的 产品 。 除 Nutanix 之 外 ， 联 想 也 与 SimpliVity、Maxta 等 公司 签订 了 OEM 协 议 ， 随 着 联想 与 


Nutanix 合 作 加 深 ， 与 SimpliVity、Maxta 等 公司 OEM 产 品 的 关注 度 变 得 越 来 越 低 。 


. 华为 : 其 产品 线 丰富 ， 几 乎 涵盖 了 IT 基础 设施 的 各 个 层面 ， 是 目前 IT 业界 最 为 全 面 的 基础 设施 供应 商 之 一 。 超 融合 系统 是 由 其 原 有 的 一 体 机 方案 演变 而 来 ， 名 为 FusionCube 的 超 融合 系统 
是 FusionSetrvetf 服 务 器 、FusionSphere 虚 拟 化 软件 以 及 整合 面向 对 象 的 存储 系统 FusionStorapge 集 成 得 到 的 ， 从 方案 架构 和 规格 上 来 看 ， 与 “原生 ”的 超 融合 系统 仍 存在 较 大 差距 ， 但 华为 
FusionSphere 作 为 国内 发 展 最 快 的 虚拟 化 Hypervisor， 不 仅 提 供 了 对 VMware 的 支持 ， 也 提供 了 自 有 的 基于 Xen 开 发 的 虚拟 化 平台 。 在 技术 能 力 方面 ， 华 为 FusionCube 依 托 性 能 强劲 的 硬件 平台 ， 可 


以 提供 较 好 的 运算 速度 和 性 能 ， 此 外 ，FusionCube 还 支持 Infiniband 组 网 方式 。 


- Cisco: Cisco 基 于 其 成 熟 的 UCS 生 态 系 统 ， 与 其 他 超 融 合 系 统 厂商 如 SimpliVity、Pivot3 签 订 了 OEM 协 议 ， 推 出 基于 UCS 的 超 融 合 系 统 。 此 外 Cisco 也 于 2016 年 年 初 发 布 了 自 有 的 超 融 合 系 统 
产品 HyperFlex Systems， 该 系统 采用 了 SpringPath 的 超 融 合 系 统 HXDP 部 署 在 其 UCS 服 务 器 之 上 ， 经 过 将 近 一 年 多 的 版 本 更 新 ， 截 至 本 书 编写 完 成 之 时 ， 发 布 了 HyperFlex 2.5 版 本 ,但 从 其 官网 获知 
的 信息 来 看 ， 其 超 融 合 系 统 仍 处 在 一 个 较 初 期 的 阶段 ， 无 论 是 产品 扩展 规模 还 是 核心 特性 ， 都 与 其 他 超 融 合 系统 存在 一 定 差距 ， 也 仅 支持 VMware 虚 拟 化 Hypervisor。HyperFlex 提 供 四 种 型 号 ， 包 
括 混合 架构 的 HX220、HX240， 以 及 全 闪存 架构 的 HXAF220 和 HXAF240。 在 一 个 HyperFlex 集 群 中 除了 可 以 支持 8 个 上 述 HX 类 型 节点 之 外 ， 还 可 以 接 入 8 个 UCS B 系 列 刀 片 服务 器 作为 计算 节点 。 


1.4 软件 定义 仓储 与 超 融 合 系统 


在 介绍 超 融 合 系统 的 定义 时 ， 本 文 提 到 了 软件 定义 存储 (Software Defined Storage， 以 下 简称 SDS) 这 一 概念 ， 那 么 什么 是 软件 定义 人 存储， 软件 定义 存储 与 超 融 合 有 着 什么 样 的 天 系 呢 ? 


“软件 定义 ”这 一 说 法 最 早 是 从 “软件 定义 网 络 ” (Software Defined Network) 这 一 概念 衍生 而 来 的 ， 逐 渐 牙 延 到 计算 和 和 存储， 甚至 提出 了 “软件 定义 一 切 ” 的 设想 。 从 技术 友 展 趋势 
来 讲 ，“ 软 件 定义 ”这 一 概念 已 经 被 广泛 接受 和 认可 。 


“软件 定义 数据 中 心 ” “软件 定 义 存储 ”以 及 “软件 定义 网 络 ”等 概念 与 超 融 合 系统 类 似 ， 并 无 统一 的 标准 定义 ， 不 同 的 厂商 或 机 构 都 有 着 各 自 的 理解 。 


SDS 主 要 是 针对 传统 架构 下 使 用 专用 硬件 构建 的 存储 系统 而 言 的 ， 通 过 软件 系统 将 开放 式 的 硬件 平台 作为 资源 池 实 现 传 统 存储 系统 所 提供 的 数据 服务 相关 功能 的 解决 方案 ， 解 决 方案 从 逻辑 
架构 上 可 以 分 为 数据 平面 和 控制 平面 。SDS 除 了 实现 传统 存储 系统 所 提供 的 功能 以 外 ， 在 可 用 性 、 扩 展 性 、 灵 活性 、 管 理 便捷 性 以 及 总 体 拥有 成 本 等 方面 也 具有 天 然 的 优势 。 


业界 SDS 产 品 众 多 ， 有 的 面向 专用 的 应 用 系统 ， 有 的 则 是 提供 相对 通用 的 底层 架构 框架 。 上 典型 的 SDS 方 案 有 Nutanix DSF, VMware VSAN、RedHat Ceph、RedHat Gluster, Dell 
ScalelO 和 微软 Windows Server Storage Space Direct (S2D) ， 等 等 。 上 述 产 品 主要 应 用 于 Server SAN 这 一 产品 形态 ， 关 于 Server SAN, 可 以 参考 第 三 方 研究 机 构 Wikibon 给 出 的 定义 : 


“通过 连接 到 多 个 独立 服务 器 的 存储 设备 组 成 的 一 个 存储 资源 池 ， 然 后 通过 高 速 互联 的 方式 (如 InfiniBand 或 低 时 延 以 太 网 ) 构建 一 个 提供 数据 存储 一 致 性 服务 的 解决 方案 。” 
从 上 述 定义 中 不 难看 出 ，SDS 的 定位 在 于 解决 数据 存储 服务 问题 ， 其 出 现 并 被 市 场 快速 接受 的 主要 原因 包括 : 

当下 互联 网 时 代 ， 数 据 量 急 速 膨胀 ， 传 统 存储 架构 已 经 无 法 满足 当前 应 用 数据 爆炸 式 增长 的 需求 ; 

- 硬件 技术 跨越 式 发 展 ， 尤 其 是 x86 架 构 和 高 速 网 络 互 联 技 术 的 快速 发 展 ， 为 软件 定义 及 分 布 式 架构 提供 了 坚实 的 硬件 基础 ; 

- 数据 中 心 架构 的 更 新 ， 尤 其 是 超 融合 系统 的 快速 发 展 ， 也 推动 了 SDS 的 快速 发 展 。 


从 超 融合 系统 与 软件 定义 存储 的 定义 不 难看 出 ， 软 件 定义 存储 是 超 融 合 系统 必 不 可 少 的 组 成 部 分 ， 相 较 于 其 他 融合 系统 而 言 ， 超 融合 系统 使 用 软件 定义 存储 来 蔡 代 传统 存储 方案 ， 突 破 传统 
存储 架构 的 各 种 限制 ， 使 得 存储 特性 可 以 满足 当下 及 未 来 数据 中 心 业务 对 数据 存储 的 需求 。 可 以 说 软件 定义 存储 是 超 融 合 系统 的 必要 但 不 充分 条 件 ， 没 有 软件 定义 存储 ， 超 融合 架构 是 不 元 整 
的 ,但 仅 通 过 软件 定义 存储 结合 虚拟 化 Hypervisor 束 自称 是 超 融 合 系统 也 是 不 准确 的 。 软 件 定 义 存 储 可 以 独立 于 超 融 合 系统 单独 存在 ， 其 定位 是 通过 Server SAN 的 产品 形态 来 替代 传统 存储 方 
案 ， 降 低 存 储 的 总 体 拥有 成 本 ， 市 来 更 高 的 灵活 性 和 扩展 性 。 


按照 Wikibon 对 Server SAN 的 定义 标准 ， 笔 者 重新 梳理 了 目前 Server SAN 以 及 超 融 合 系统 的 市 场 布 局 ， 供 读者 参考 ， 如 表 1-1 所 示 。 


表 1-1 Server SAN 及 超 融合 系统 的 市 场 布 局 


类 型 厂商 名 称 
完整 的 一 体 化 解决 方案 ( Appliance| Nutanix, Scale Computing, HPE SimpliVity，Pivot3， 联 #1 HX, Dell 
Solutions) XC, Dell VxRail， 华 为 FusionCube, Cisco HyperFlex 
软件 系统 解决 方案 (Software-only| Maxta, HPE StoreVirtual VSA, Dell ScalelO, VMware VSAN, 
Solutions ) Nexenta, StorMagic, ÉX FusionStorage 
RedHat Ceph, OpenStack Cinder, RedHat Gluster, Microsoft SMB3, 


数据 系统 解决 方案 (Data Systems) 


Amazon S3 


从 表 1-1 中 不 难看 出 Server SAN 与 超 融 合 系统 的 层次 关系 ， 两 者 之 间 是 相互 渗透 、 相 互 影响 的 ， 超 融合 系统 的 重点 是 将 标准 化 的 COTS (Commercial-Off-The-Shelf) 硬件 环境 、 软 件 定义 
计算 (Hypervisor) 、 软 件 定义 存储 (SDS) 、 软 件 定义 网 络 (SDN) 以 及 统一 的 管理 控制 中 心 (Management System) 相 融 合 ， 以 便 获 得 最 佳 的 使 用 体验 ， 而 软件 定义 存储 (SDS) 则 更 加 


专注 于 数据 存储 服务 ， 以 提升 数据 管理 效率 。 最 为 理想 的 软件 定义 存储 方案 应 该 与 超 融 合 系统 一 样 具有 开放 性 、 兼 容 性 ， 能 够 支持 多 种 Hypervisor 和 硬件 ， 以 满足 各 种 业务 场景 的 应 用 需求 。 
参考 第 三 方 研究 机 构 的 选 型 建议 ， 笔 者 整理 了 Server SAN 的 选 型 建议 ， 具 体 如 下 : 
广泛 的 生态 支持 能 力 : 
. 虚拟 化 Hypetvisor: 支持 VMware ESXi、 微 软 HyperV、KVM 等 ; 
` 物理 设备 : 支持 非 虚拟 化 环境 ; 
BADR: 支持 全 闪存 架构 及 固态 硬盘 与 机 械 磁 瘟 混合 架构 ; 
云集 成 能 力 : 可 以 与 主流 的 公有 云 平台 实现 无 颖 对 接 。 
` 扩展 性 : 具有 强大 的 扩展 能 力 ， 可 以 满足 单 集群 上 百 节 点 的 部 署 需求 。 
. 可 管理 性 : 提供 完善 的 API 接 口 ， 满 足 自动 化 的 运 维 管理 需求 。 


- Ap: 架构 简单 、 运 行 、 操 作 方 便 。 


基于 虚拟 化 技术 的 数据 中 心 架 构 在 过 去 10 年 间 成 为 数据 中 心 的 主流 ， 但 其 仍然 是 以 服务 器 、 人 存储 网 络 、 存 储 设备 三 大 组 件 考 加 形成 的 传统 三 层 架 构 ， 如 图 1-9 所 示 。 
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图 1-9 ”传统 数据 中 心 三 层 架 构 


随 着 应 用 和 用 户 数 的 激增 ， 图 1-9 中 的 三 层 染 构 在 数据 中 心 建设 和 运 维 过 程 中 暴露 出 诸多 问题 


- 服务 器 虚拟 化 技术 带 来 了 如 提高 服务 器 资源 利用 率 和 应 用 的 可 靠 性 等 优势 但 是 并 没有 解决 数据 中 心 内 的 存储 和 网 络 的 管理 、 成 本 、 等 方面 遇 到 的 问题 。 虽 然 可 以 通过 采购 额外 的 组 


件 来 解决 当前 网 络 、 存 储 的 问题 ， 但 这 种 堆砌 又 加 的 方式 必然 会 引入 新 的 问题 ， 如 额外 的 管理 负载 、 较 差 的 性 能 等 


:在 以 虚拟 化 为 基础 架构 的 数据 中 心 环境 里 ， 虚 拟 化 技术 让 应 用 摆脱 了 服务 器 硬件 的 束缚 ， 但 也 可 能 会 造成 用 户 被 虚拟 化 软件 绑 定 的 现象 。 


. 在 存储 方面 ， 传 统 集中 式 共享 存储 并 不 是 专门 为 虚拟 化 环境 设计 的 ， 不 具备 虚拟 机 感知 能 力 ， 无 法 通过 虚拟 化 或 存储 控制 台 对 虚拟 机 的 性 能 进行 直观 了 解 。 这 是 因为 传统 存储 以 LUN 为 基 
础 ， 一 个 LUN 中 同时 存储 着 多 个 虚拟 机 (虽然 一 个 LUN 也 可 以 只 存储 一 个 虚拟 机 ， 但 存储 管理 的 工作 量 会 激增 ) ， 在 存储 控制 台中 无 法 对 单个 虚拟 机 的 性 能 数据 进行 展示 。 


- 存储 设备 的 性 能 和 容量 受 限于 存储 的 控制 器 和 盘 柜 ， 数 据 中 心 在 采购 存储 设备 时 兼顾 未 来 业务 发 展 ， 往 往 存 在 超额 购置 存储 设备 的 情况 ， 而 这 无 疑 会 造成 资金 和 资源 的 浪费 。 归 根 结 底 是 
因为 集中 式 共享 存储 的 性 能 无 法 真正 实现 随 业 务 发 展 的 按 需 扩容 。 


| 存储 控制 器 决定 了 存储 的 整体 性 能 ， 因 其 内 谱 在 存储 设备 中 ， 无 法 实现 横向 的 扩展 。 当 虚拟 机 数量 以 及 IO 〇 需求 大 量 增加 时 ， 巨 量 的 数据 访问 请 求 会 导致 控制 器 拥塞 ， 造 成 性 能 因 
此 ， 当 有 新 的 应 用 需要 上 线 时 ， 只 能 通过 购置 新 的 存储 设备 解决 现 有 环境 中 存储 设备 性 能 瓶颈 问题 。 正 是 由 于 存储 设备 缺乏 线性 扩展 能 力 ， 和 致使 业务 发 展 受 限 ， 无 法 及 时 响应 业务 发 展 需求 。 


` 在 成 本 方面 ， 传 统 集中 式 存 储 依赖 RAID 机 制 来 保证 数据 的 宛 余 ， 依 赖 多 个 控制 器 多 活 的 方式 来 保障 控制 器 的 宛 余 能 力 , 但 是 在 其 中 一 个 或 多 个 控制 器 损坏 的 情况 下 ， 剩 余 的 控制 器 可 能 
因为 突 发 的 数据 访问 请 求 而 导致 性 能 衰减 甚至 访问 故障 。 引 入 存储 设备 双 活 方案 提高 设备 可 用 性 ， 带 来 成 本 压力 的 同时 ， 也 带 来 了 管理 上 的 复杂 性 。 


- 存储 设备 的 高 级 特性 如 数据 压缩 、 重 复数 据 删除 、 复 制 特 性 以 及 SAN 交 换 机 的 端口 均 需 购买 额外 的 授权 才能 激活 使 用 ， 这 意味 着 成 本 的 增加 。 
.不同 品 牌 和 型 号 的 存储 、 服 务 器 使 用 不 同 的 控制 台 进行 管理 ， 管 理 员 需要 经 过 专门 的 培训 才 可 以 使 用 ， 这 给 管理 员 的 运 维 管理 工作 带 来 了 额外 的 负担 。 


- 在 管理 方面 ， 通 常服 务 器 与 存储 管理 由 不 同 的 工作 人 员 或 工作 组 负责 ， 当 服务 器 管理 员 有 存储 需求 时 ， 需 要 向 存储 管理 员 提 出 申请 。 而 存储 管理 员 除 了 需要 负责 存储 设备 的 运 维 管理 之 


外 ， 还 需要 兼顾 存储 网 络 的 管理 ， 如 存储 交换 机 的 安全 配置 等 。 这 种 使 用 和 管理 模式 也 必然 带 来 资源 层 的 隔离 ， 如 服务 器 管理 员 并 不 了 解 存储 的 配置 是 否 适用 于 业务 应 用 ， 而 存储 管理 员 对 应 用 
系统 的 计算 和 数据 访问 特性 不 了 解 ， 无 法 准确 地 提供 应 用 系统 所 需 的 存储 资源 。 

C 在 部 署 运 维 方面 ， 三 层 架 构 需 要 进行 复杂 的 连 线 、 上 架 才 可 以 开始 安装 ， 安 装配 置 的 过 程 复 杂 ， 通 常 需要 数 周 其 至 更 长 的 时 间 ， 在 互联 网 化 的 今天 ， 系 统 上 线 时 间 直 接 决定 了 业务 成 功 与 
Fo 


软件 及 硬件 因为 功能 升级 或 缺陷 ， 不 可 避免 地 需要 进行 软件 和 硬件 国 件 升级 。 但 是 传统 架构 在 升级 时 需要 有 较 长 的 停机 窗口 ， 同 时 升级 过 程 中 会 要 求 应 用 停机 ， 这 造成 了 业务 不 可 以 持续 
运行 。 另 外 ， 在 大 规模 的 数据 中 心里 ， 升 级 更 新 过 程 需 要 经 过 严格 的 变更 管理 、 审 批 流程 ， 这 也 导致 了 上 日常 的 升级 更 新 成 为 管理 员 的 事 梦 。 


综 上 所 述 ， 随 痢 应 用 数量 及 用 户 规模 的 增长 以 及 用 户 对 于 系统 可 用 性 要 求 的 提高 ， 三 层 架 构 因 其 架构 复杂 、 维 护 难 度 大 、 成 本 高 等 不 足 ， 已 经 无 法 适应 当前 企 事 业 单 位 业务 发展 的 要 求 ， 数 
据 中 心 建设 及 管理 部 门 急切 需要 一 种 新 的 基础 架构 来 解决 上 述 问题 


1.6 ”起 融合 出 现 的 诱因 


企业 越 来 越 依 赖 信息 技术 ， 业 务 要 求 数据 中 心 具备 支持 多 样 性 的 应 用 负载 以 及 对 应 用 变化 即时 响应 和 快速 调整 的 能 力 。 同 时 ，IT 人 力 资源 和 运 维 成 本 的 受 限 使 得 数据 中 心 需要 采用 新 的 架构 
与 技术 应 对 成 本 上 的 挑战 。 以 业务 视角 来 审视 IT， 要 求 IT 系 统 的 能 力 必须 能 够 度量 ， 可 以 通过 服务 等 级 协议 (简称 SLA) 的 方式 来 衡量 应 用 的 业务 回报 。 另 外 ， 业 务 对 敏捷 性 和 灵活 性 的 需求 ， 
也 要 求 数据 中 心 具备 类 似 于 公有 云 环 境 的 灵活 性 ， 可 以 实现 公有 云 平台 和 混合 云 平台 进行 混合 管理 的 能 力 ， 并 能 满足 业务 的 安全 需求 。 


男 一 方面 ， 近 年 来 超 融 合 系统 的 流行 也 与 相关 技术 的 成 熟 有 直接 关系 ， 如 SSD 及 低 时 延 网 络 技术 。SSD 和 低 时 延 网 络 因 为 性 能 提升 及 成 本 的 降低 ， 已 经 逐渐 成 为 当前 数据 中 心 建设 时 的 标 


一 些 富 有 远见 的 上 T 行 业 先 锋 开 始 思考 是 否 能 将 大 型 互联 网 企业 在 数据 中 心 建设 和 运行 方面 的 经 验 进行 提炼 而 为 企业 数据 中 心 提供 更 具 技 术 前 瞻 性 的 产品 和 服务 。 于 是 ， 超 融合 扩 术 领域 逐渐 
从 技术 研究 发 展 成 一 个 行业 ， 促 使 以 Nutanix 为 代表 的 一 系列 HCI 公 司 迅速 发 展 。 


Nutanix 汲 取 来 自 Google、Facebook 等 互联 网 巨头 的 数据 中 心 精华 技术 (包括 分 布 式 、Web-Scale、 横 向 扩展 、 虚 拟 化 等 技术 ) ， 面 向 企业 级 市 场 推出 了 超 融合 系统 解决 方案 ， 将 计算 、 
存储 组 件 进行 高 度 集成 ， 其 产品 在 设计 时 遵循 : 


- 采用 通用 的 x86 服 务 器 ， 并 在 同一 个 服务 器 上 实现 计算 虚拟 化 、 存 储 功能 。 

` 通过 软件 定义 的 方式 实现 ， 而 不 锁定 特定 品牌 的 硬件 或 板 卡 。 

所 有 组 件 均 采 用 分 布 式 架构 (如 配置 数据 库 、 元 数据 、 数 据 、 服 务 ) ,保证 了 数据 和 服务 的 宛 余 性 。 

- 内 殡 自修 复 功 能 来 保证 集群 在 出 现 组 件 故 障 时 进行 自动 的 修复 和 切换 ， 减少 了 人 工 管 理 的 成 本 并 提高 了 系统 的 可 用 性 。 
` 完备 的 API， 人 允许 与 第 三 方 系统 集成 并 可 以 实现 自动 化 管理 ， 内 置 的 Prism 控 制 台 可 以 实现 图 形 化 、 智 能 化 的 配置 与 分 析 。 


Nutanix 超 融合 系统 解决 方案 的 特点 如 图 1-10 所 示 。 


其 于 x86 架 构 的 超 融 合 
集成 了 计算 和 存储 资源 


以 软件 方式 实现 的 引擎 010010001001 


10095 fF XE X. 100100100100 


分 布 式 


集群 广度 的 数据 和 服务 


目 我 修复 的 系统 
分 布 式 架构 消除 单 点 故障 


基于 AP1 的 自动 化 和 丰富 的 分 析 工 具 
数据 驱动 的 效率 


图 1-10 Nutanix HCI 技 术 特 点 


1.7 ”起 融合 适用 的 应 用 场景 


按照 应 用 类 别 来 看 ， 当 前 数据 中 心中 承载 的 应 用 主要 包括 核心 业务 应 用 、 私 有 云 和 混合 云 、 大 数据 、 分 支 机构 、 数 据 保 扩 与 灾难 恢复 、 桌 面 云 、 协 作 与 统一 通信 。 随 着 超 融 合 技 术 在 过 去 数 


年 的 应 用 与 实践 ， 已 经 完全 适用 于 上 述 的 所 有 应 用 场景 ， 并 提供 高 效 稳定 的 运行 体验 ， 如 图 1-11 所 示 。 


协作 与 统一 通信 核心 业务 应 用 
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图 1-11 HCI 适 用 的 应 用 场景 


本 节 只 对 超 融合 系统 适用 的 应 用 场景 进行 简要 介绍 ， 如 需要 了 解 更 详细 的 解决 方案 介绍 ， 可 参见 第 7 章 。 


核心 业务 应 用 是 指 那些 如 果 停 机 或 性 能 下 降 会 对 业务 造成 影响 的 应 用 ， 这 些 应 用 包括 核心 数据 库 、ERP 和 CRM 等 。 将 这 些 应 用 部 署 在 HCI 上 ， 可 以 提高 系统 的 性 能 、 可 扩展 性 、 可 用 性 、 可 
管理 性 。 将 这 些 应 用 从 物理 环境 迁移 到 HCI 环 境 ， 也 可 以 降低 管理 和 维护 成 本 。 另 外 ， 在 技术 支持 方面 ，HCl 是 否 与 这 些 应 用 供应 商 合 作 发 布 最 佳 实践 或 取得 相关 认证 也 至 关 重 要 。 


` 私有 云 和 混合 云 


私有 云 对 于 数据 中 心 的 建设 与 管理 至 天 重要 。 无 论 是 开发 测试 还 是 正式 的 生产 环境 都 可 以 基于 私有 云 环 境 构 建 。 私 有 云 以 虚拟 化 和 资源 池 为 基础 ， 并 以 流程 化 的 云 管理 平台 为 依托 ， 且 支持 
用 户 目 助 服务 。 基 于 HCI 构 建 的 私有 云 可 以 为 用 户 提供 安全 可 控 上 且 具 有 弹性 的 云 环境 。 


混合 云 的 特点 是 将 公有 云 (如 AWS/Azure 等 ) 的 弹性 与 私有 云 的 安全 可 控 相 结合 ， 通 过 在 HCI 上 构建 混合 云 方案 ， 可 以 让 弹性 负载 (如 应 用 服务 器 ) 放 在 公有 云 ， 将 对 安全 性 有 要 求 的 应 用 
和 数据 (如 数据 库 ) 放 在 私有 云 ， 从 而 实现 公有 云 和 私有 云 的 对 接 。 


- 大 数据 


通过 大 数据 ， 企 业 最 大 化 利用 数据 的 价值 来 帮助 业务 友 展 。 而 随 着 大 数据 应 用 的 普及 ， 有 用户 对 于 大 数据 的 实时 性 也 提出 了 要 求 。 因 此 ， 这 也 要 求 基 础 以 构 可 以 提供 更 好 的 性 能 和 扩展 性 。 基 
于 HCI 来 构建 大 数据 平台 ， 在 满足 大 数据 系统 对 计算 性 能 、 存 储 容量 需求 的 同时 ， 也 提供 了 更 好 的 扩展 性 和 伸缩 性 。 此 外 ， 在 HCI 上 可 以 同时 运行 多 种 不 同 的 工作 负载 ， 如 日 天 HCI 环 境 主要 为 用 
尸 提 供 虚 拟 云 环 境 ， 而 当夜 间 环 境 的 负载 降低 后 ， 可 以 用 这 些 闲 置 出 来 的 资源 完成 大 数据 的 分 析 负 载 。 这 无 疑 提高 了 基础 架构 的 利用 率 ， 降 低 了 数据 中 心 的 成 本 。 


- 分 支 机 构 
分 支 机 构 一 直 是 IT 管理 上 的 难点 ， 通 常 分 支 机 构 的 IT 力量 比较 薄弱 ， 不 具备 专业 数据 中 心 和 专业 IT 人 员 的 条 件 。 


通过 采用 HCI 构 建 分 文 机 构 [T 环 境 ， 可 以 让 IT 部 门 在 单一 控制 台 进 行 统一 的 IT 管理 与 监控 ， 并 可 以 设置 数据 保护 与 灾难 恢复 策略 来 保护 分 支 机 构 的 系统 和 数据 ， 防 止 因为 系统 停机 或 数据 丢 
失 对 组 织造 成 业务 上 的 影响 。 


- 数据 保护 与 灾难 恢复 


数据 保护 与 灾难 恢复 可 以 防止 数据 中 心 因为 电力 、 网 络 、 系 统 故 障 导致 的 系统 停机 或 数据 丢失 。 通 过 HCI 构 建 灾 备 站 点 ， 可 以 让 系统 和 数据 跨 数据 中 心 仓储 和 运行 ， 当 灾难 友 生 时 ， 系 统 可 
以 自动 化 或 手工 进行 系统 和 数据 的 恢复 。 针 对 不 同 的 业务 要 求 和 场景 ，HCI 可 以 满足 不 同 级 别 的 RTO/RPO 要 求 。 此 外 ，HCI 需 要 支持 不 同 的 备份 软件 和 方案 ， 并 得 到 这 些 广 商 的 官方 认证 。 


: RAZ 


通过 建设 桌面 云 ， 可 以 帮助 组 织 提 高 数据 安全 性 并 简化 IT 管理 。 通 过 HCI 构 建 梨 面 云 可 以 满足 桌面 云 所 需 的 性 能 、 可 用 性 、 可 扩展 性 ， 同 时 也 可 以 降低 桌面 云 的 建设 成 本 并 可 以 进行 多 个 数 
据 中 心 、 多 种 虚拟 化 平台 的 统一 管理 。 这 就 要 求 HCI 能 够 与 主 沅 的 桌面 云 商 进行 官方 合作 并 得 到 相关 的 认证 。 


协作 与 统一 通信 


协作 与 统一 通信 系统 是 组 织 内 部 、 组 织 与 外 部 进行 沟通 的 重要 系统 。 同 时 ， 最 终 用 户 需要 通过 这 些 系统 实现 收发 邮件 、 即 时 通信 、 语 音 电 话 等 功能 。 用 户 体验 天 乎 协作 与 统一 通信 系统 的 成 
功 与 否 ， 通 过 HCI 构 建 协 作 与 统一 通信 平台 ， 可 以 提高 系统 的 可 用 性 ， 并 可 以 随 着 用 户 规模 的 增长 进行 扩展 。HCI 可 以 伴随 组 织 规模 的 增长 而 增长 ， 并 且 在 集群 扩展 时 得 到 可 预测 的 性 能 。 


不 同 的 应 用 场景 对 于 HCI 的 技术 要 求 不 同 ， 以 核心 业务 系统 为 例 ， 其 更 加 关注 性 能 、 数 据 元 余 和 可 靠 性 等 指标 ， 而 对 存储 服务 能 力 (如 是 否 支 持 压缩 、 重 复数 据 删 除 ) 和 多 租户 支持 不 太 关 
注 ， 针 对 上 述 七 种 应 用 场景 的 技术 关注 点 的 矩 阵 可 以 参考 表 1-2。 


表 1-2 应 用 场景 与 技术 关注 点 矩阵 


技术 协作 与 统 


关注 点 一 通信 

性 能 e 
sues | e | e | © | o | o | o | e 
mam) [* [+ [> [+ [| - 
缩 、 重 复数 据 删 除 ) 
可 扩展 性 | e| e |。 | e | e |。 | œ 
数据 保护 ee | e 
灾难 恢复 ee | e 
多 租户 支持 |o | e |] ® |o | o | 。 | Do 
nomen | © | e | © | ® | o |o | o 
安全 性 _e | 。 | o | o | o | 。 | œ 
集中 管理 _e | |o | 。 | © | © j 。 
R: 95x, OAR, 为 不 适用 或 不 重要 。 

1.8 引入 超 融 合 的 时 机 

超 融 合 系统 作为 一 种 先进 的 数据 中 心 架 构 ， 并 不 要 求 用 户 废 弃 数据 中 心 已 有 的 投资 和 架构 ， 而 是 可 以 与 数据 中 心 现 有 的 系统 和 架构 共存 。 

得 益 于 HCI 独 有 的 特点 ， 用 户 不 需要 像 传统 架构 一 样 进行 资源 的 提前 购买 ， 而 是 可 以 按 业 务 的 增长 同步 进行 扩容 。 正 是 由 于 这 个 特点 ， 用 户 可 以 从 小 规模 入 手 采用 HCI 并 逐渐 扩展 。 


以 下 是 笔者 总 结 的 一 些 引 入 HCI 的 时 机 ， 供 读者 参考 。 

数据 中 心 更 新 换代 : 数据 中 心 因 为 设备 淘汰 需要 进行 更 新 换代 ， 通 过 引入 超 融合 架构 可 以 让 组 织 得 到 更 多 优势 。 

. 新 的 数据 中 心 建设 : 在 新 的 数据 中 心 建设 时 采用 HCI 可 以 让 数据 中 心 具 备 分 布 式 、 横 向 扩展 、 自 修复 等 技术 特点 。 

- 空间 与 电力 不 足 : 数据 中 心 在 发 展 过 程 中 可 能 会 面临 空间 和 电力 不 足 的 问题 ， 通 过 高 密度 的 HCI 可 以 使 用 更 小 的 空间 与 电力 来 支撑 应 用 。 

- 性 能 瓶颈 : 使 用 三 层 架 构 的 情况 下 ， 随 着 业务 的 增长 不 可 避免 地 遇 到 性 能 瓶颈 ， 通 过 HCI 的 横向 扩展 能 力 可 以 解决 现 有 的 性 能 问题 并 确保 未 来 没有 性 能 瓶颈 。 
* 可 用 性 困境 : 采用 传统 三 层 架 构 的 情况 下 ， 存 储 设备 通常 存在 单 点 故障 ， 采 用 HCI 后 可 以 避免 系统 的 单 点 故障 ， 可 接受 一 个 或 多 个 组 件 、 节 点 、 机 箱 的 故障 。 
新 应 用 上 线 : I 芽 部 门 可 以 在 新 的 应 用 上 线 时 采用 HCI， 并 可 以 结合 HCI 的 特点 进行 应 用 架构 的 优化 与 调整 ， 让 应 用 具备 分 布 式 、 横 向 扩展 等 特性 。 

- 灾 备 数据 中 心 建设 : 许多 组 织 将 灾 备 数据 中 心 建设 加 入 IT 建 设 议程 ， 使 用 HCI 建 设 灾 备 中 心 不 仅 可 以 节省 空间 和 成 本 ， 也 能 提高 管理 效率 。 

` 分 支 机 构 集 中 管理 : 无 论 是 建设 新 的 分 支 机 构 IT 环 境 还 是 对 现 有 的 分 支 机 构 [ 芽 系统 实现 集中 管控 ,使 用 HCI 可 以 减少 分 支 机 构 的 I 管理 维护 成 本 。 

: 合并 与 收购 : 在 业务 进行 合并 时 ， 采 用 HCI 可 以 快速 实现 业务 整合 以 及 系统 部 署 、 上 线 并 支持 集中 管理 。 


` 快速 上 线 应 用 : 业务 需要 应 用 快速 上 线 ， 不 希望 经 过 漫长 的 部 署 、 测 试 周期 ， 采 用 HCI 可 以 加 快 应 用 的 部 署 ， 让 应 用 具备 快速 上 线 的 能 力 。 


第 2 章 ”Nutanix 超 融合 介绍 


Nutanix 作 为 HCI 领 域 的 领导 者 ， 其 在 产品 架构 、 功 能 等 方面 具有 领先 优势 。 本 章 将 从 Nutanix 公 司 、Nutanix 超 融合 产品 形态 、 支 持 Nutanix 超 融合 的 硬件 载体 、 关 键 技术 实现 等 方面 进行 
介绍 ， 力 求 使 读者 对 Nutanix 公 司 与 技术 实现 、 产 品 线 有 一 个 直观 的 了 解 。 


2.1 ”Nutanix 公 司 介绍 


Nutanix 是 一 家 超 融合 与 企业 云 计 算 公 司 ， 其 提供 的 超 融合 解决 方案 通过 软件 定义 的 方式 实现 人 存储、 计算 、Hypervisor 等 组 件 的 融合 ， 打 破 了 传统 服务 器 、 人 存储 、 网 络 、 虚 拟 化 和 数据 中 心 
管理 的 竖井 结构 ， 让 数据 中 心 的 基础 以 构 更 为 简单 、 便 于 集成 且 易 于 扩展 。 


Nutanix 在 2009 年 由 Dheeraj Pandey, Mohit Aron 和 Ajeet Singh 共 同 创 立 ， 并 吸引 了 大 量 来 自 Google、Facebook 等 互联 网 企业 的 权威 技术 人 士 的 加 入 。 
Nutanix 在 2013 年 达到 了 10 亿 美元 的 估 值 ， 成 为 一 家 “ 独 角 兽 ”公司 ， 并 于 2016 年 9 月 上 市 。2017 年 6 月 ，Nutanix 宣 布 与 Google 战 略 合作 ， 发 布 了 完整 的 企业 云 解决 方案 。 


Nutanix 作 为 第 一 家 上 市 的 专业 超 融合 解决 方案 供应 商 ， 其 提供 的 软 硬 件 一 体 化 的 超 融合 解决 方案 获得 全 球 6200 多 家 客户 认可 ， 用 于 运行 不 同 的 工作 负载 ， 如 企业 核心 应 用 、 数 据 库 、 虚 拟 
桌面 基础 设施 、 统 一 通信 和 大 数据 分 析 等 。 
2.2 Nutanix 产 品 介 绍 


Nutanix 是 专 为 企业 云 环境 设计 的 超 融 合 系统 解决 方案 。 为 企业 带 来 了 Web-scale 架 构 的 性 能 和 经 济 效益 。Nutanix 企 业 云 平 台 由 两 个 产品 系列 Nutanix Acropolis 和 Nutanix Prism 组 成 ， 
如 图 2-1 所 示 。 


Prism Acropolis 


基础 架构 管理 应 用 移动 洒 构 


操作 洞察 Acropolis 虚拟 化 程序 (AHV) 


规划 分 布 式 仓储 以 构 


图 2-1 Nutanix 产 品 组 成 


Acropolis 用 于 提供 高 性 能 的 分 布 式 存储、Hypervisor 虚 拟 化 平台 以 及 支持 各 类 Hypervisor 的 应 用 移动 性 解决 方案 ，Prism 系 统 产 品 用 于 集成 虚拟 化 和 基础 架构 管理 、 运 萤 分 析 和 一 键 式 管理 
解决 方案 。 


2.2.1 Acropolis 软 件 


Acropolis 是 分 布 式 资源 管理 系统 ， 集 数据 平台 、 协 同 管理 、 虚 拟 化 管理 功能 于 一 身 。 其 包括 以 下 三 个 主要 部 分 : 

` 分 布 式 存储 架构 (DSF) 

基于 Nutanix 最 为 核心 的 分 布 式 文件 系统 (NDFS) 扩展 而 来 ， 已 从 分 布 式 存储 系统 进化 成 一 个 功能 更 强 的 存储 平台 。 

虚拟 化 平台 (AHV) 

基于 CentOS KVM Hypervisor 开 友 ， 是 提供 企业 级 功能 和 文 持 的 多 功能 虚拟 化 平台 组 件 。 

应 用 移动 性 架构 (AMF) 

类 似 于 Hypervisor 把 操作 系统 从 硬件 层 剥 离 出 来 ，AMF 将 应 用 工作 负载 (虚拟 机 、 人 存储 和 容器 等 ) 从 Hypervisor 层 剥离 ， 其 文 持 在 不 同 的 Hypervisor 之 间 切 换 和 移动 工作 负载 。 
2.2.1.1 DSF 

Acropolis DSF 虽 在 简化 虚拟 环境 的 存储 与 数据 管理 。 每 个 节点 上 都 有 一 个 Controller VM (CVM) ，CVM 中 运行 Nutanix AOS 系 统 并 实现 存储 控制 器 的 功能 。 


多 个 Nutanix 节 点 组 成 一 个 集群 并 提供 DSF 功 能 。DSF 将 Nutanix 集 群 内 所 有 主机 的 SSD 和 HDD 存 储 逻 辑 汇 总 在 一 起 ， 将 其 输出 至 虚拟 化 层 ， 提 供 按 需 分 配 的 企业 数据 存储 。 对 于 虚拟 化 软 
件 ，DSF 看 起 来 就 像 集中 式 存 储 阵 列 一 样 ， 可 以 提供 iSCSI、NFS 和 9SMB 不 同 协议 的 存储 服务 ，DSF 分 配角 色 和 任务 到 系统 内 的 所 有 节点 ， 利 用 MapReduce 等 机 制 执行 分 布 式 任务 处 理 ， 从 而 消 
除了 性 能 瓶颈 和 单 点 故障 。 通 过 数据 本 地 化 特性 将 所 有 I/O 优 先 在 本 地 进行 处 理 ， 以 减少 网 络 延 误 和 数据 访问 路 径 ， 提 高 存储 性 能 。 分 布 式 存储 架构 (DSF) 如 图 2-2 所 示 。 
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图 2-2 ”分 布 式 存储 架构 (DSF) 


Nutanix 消 除了 应 用 对 传统 SAN 和 NAs 解 决 方案 的 需求 ， 同 时 提供 丰富 的 以 虚拟 机 为 中 心 的 软件 定义 服务 ， 如 快照 、 克 隆 、 数 据 分 层 、 数 据 本 地 化 、 灾 难 恢复 ， 重 复数 据 删 除 、 压 缩 和 纠 删 
码 等 功能 。 


DSF 组 织 数 据 对 于 理解 DSF 的 工作 原理 至 关 重 要 ， 理 解 以 下 概念 有 助 于 读者 了 解 Nutanix DSF 的 10 处 理 机 制 。 

` 存储 池 

整个 集群 中 物理 存储 设备 的 逻辑 组 ， 包 括 SSD 与 HDD。 存 储 池 跨 多 个 Nutanix 节 点 ， 并 可 随 集 群 规模 扩展 而 变 大 。 在 大 多 数 集群 环境 中 只 会 使 用 一 个 存储 池 。 
- 存储 容器 


存储 容器 是 存储 池 的 一 个 逻辑 子 集 ， 包 含 一 组 虚拟 机 或 虚拟 磁盘 文件 。 存 储 的 配置 选项 (如 RF、 压 缩 、 重 复数 据 删 除 、 纠 删 码 等 ) 均 在 存储 容器 级 别 配 置 ， 并 应 用 于 存储 容器 中 的 虚拟 机 和 
虚拟 磁盘 。 存 储 容器 通常 与 虚拟 机 的 数据 仓库 进行 一 对 一 映射 (就 NFS/SMB 而 言 ) 。 


-虚拟 磁盘 (vDisk) 

vDisk 是 指 DSF 中 所 有 512KB 以 上 的 文件 ， 如 vmdk 文 件 等 虚拟 磁盘 文件 。 

虚拟 磁盘 由 Extent 构 成 ， 这 些 Extent 在 磁盘 上 作为 Extent Group 进 行 分 组 并 存储 。 
- Extent 


Extent 是 一 段 逻 辑 上 连续 的 1MB 数 据 ， 由 N 个 连续 块 组 成 ( 因 Guest OS 块 的 大 小 不 同 而 不 同 ) 。 以 Sub Extent (又 称 Slice) 为 基础 来 写 入 / 读 取 / 修 改 ， 以 保证 颗粒 度 和 访问 效率 。 根 据 读 
取 / 缓 存 的 数据 量 ， 将 Extent 的 slice 移 动 到 缓存 中 时 可 能 会 对 其 进行 剪裁 。 


- Extent Group 


Extent Group 是 一 段 物理 上 连续 的 4MB 的 存储 数据 。 该 数据 作为 一 个 文件 保存 在 CVM 管 理 的 存储 设备 上 。Extent 动 态 分 布 在 Extent Group 之 中 ， 以 便 跨 节点 /磁盘 提供 数据 分 块 ， 提 高 
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图 2-3 是 数据 存储 结构 间 的 对 应 关系 。 
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图 2-3 ”数据 存储 结构 


- OpLog 


OpLog 类 似 于 文件 系统 日 志 ， 它 的 构建 是 为 了 处 理 突 发 性 写 入 ， 它 会 将 写 入 数据 合并 后 按 顺 序 存储 到 Extent Store。 为 了 确保 数据 可 用 性 ， 返 回 写 入 确认 之 前 ，OpLog 会 将 写 数据 同步 复制 
到 其 他 CVM 的 OpLog。 所 有 CVM 的 OpLog 都 会 参与 复制 ， 并 且 会 根据 负载 进行 动态 选择 。OpLog 只 处 理 随 机 写 入 且 存 储 在 SSD 层 上 ， 以 便 提供 快速 的 |/O 写 入 性 能 。 对 于 顺序 写 入 操作 会 直接 
ii 


到 Extent Store, 

- Extent Store 

Extent Store 是 DSF 的 永久 性 数据 存储 ,包含 SSD 和 HDD， 而 且 可 以 扩展 。 数 据 从 两 个 途径 写 入 Extent Store: 

- 随机 写 入 : 经 过 OPpLog 整 理 后 写 入 。 

MPRA: 绕 过 OpLog 写 入 。 

Nutanix ILM (Information Lifecycle Manager) 服务 会 根据 MO 模式 动态 确定 数据 在 冷 热 层 的 放置 位 置 并 将 数据 在 各 层 之 间 移 动 。 

- Unified Cache 

Unified Cache 是 DSF 的 读 缓存 ， 包 括 CVM 内 存 和 SSD 两 部 分 空间 。Unified Cache 支 持 重复 数据 删除 ， 可 以 通过 使 用 重复 数据 删除 功能 提升 Cache 利 用 率 。 


2.2.1.2 AHV 


Nutanix 基 于 经 验证 的 开源 技术 ， 自 主 开发 了 企业 级 虚拟 化 平台 AHV， 可 以 通过 Prism 界 面 、REST API 和 名 为 aCLI (Acropolis CLI) 的 交互 式 命令 行 界面 进行 管理 。 这 些 工具 消除 了 开源 软 
件 普遍 具有 的 管理 复杂 性 ， 帝 来 开 箱 即 用 的 使 用 体验 ， 而 且 无 须 像 其 他 虚拟 化 软件 一 样 文 付 高 昂 的 许可 费用 。 


AHV 完 全 基于 Web-Scale 技 术 开 发 ， 与 基于 传统 共享 存储 架构 的 虚拟 化 平台 有 本 质 区 别 ， 例 如 ，AHV 集 群 无 节点 限制 ， 虚 拟 机 数量 、 配 置 等 只 受 限 于 物理 服务 器 配置 ， 管 理 平台 完全 分 布 
式 ， 等 等 ， 如 图 2-4 所 示 。 
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图 2-4 Nutanix 虚 拟 化 管理 程序 AHV 


AHV 提 供 了 企业 级 虚拟 化 平台 所 需要 的 绝 大 部 分 功能 ， 例 如 高 可 用 、 虚 拟 机 热 迁 移 、 动 态 资 源 调度 、 快 照 、 克 隆 、 容 灾 复 制 等 。AHV 已 经 得 到 众多 Nutanix 的 合作 伙伴 的 支持 ， 例 如 AHV 可 
以 结合 趋势 进行 防 病毒 保护 ，Commvault 支 持 AHV 的 备份 ， 在 撰写 本 书 时 ，Veeam 也 发 布 了 即将 支持 AHV 备 份 的 消息 ;Palo Alto 和 训 umio 可 以 实现 AHV 上 的 微分 段 等 高 级 网 络 管理 功能 。 在 
关键 性 应 用 方面 ，AHV 不 仅 支 持 Oracle、SQL Server 等 企业 级 应 用 软件 ， 而 且 还 通过 了 SAP Netweaver 认 证 ， 进 一 步 证 明了 AHV 在 企业 数据 中 心 市 场 受 认 可 的 程度 。 


AHV 无 须 高 昂 的 虚拟 化 软件 成 本 ， 由 Nutanix Prism 提 供 统一 管理 。 无 论 是 功能 还 是 可 管理 性 ，AHV 都 可 以 使 用 户 更 加 专注 于 应 用 负载 本 身 ， 而 不 必 为 底层 基础 设施 日 常 维护 分 心 。 
2.2.1.3 AMF 


AMF 提 供应 用 程序 跨 虚 拟 化 平台 的 移动 性 ， 屏 菩 底 层 虚 拟 化 的 多 样 性 和 复杂 性 ， 让 IT 管理 人 员 更 加 关注 应 用 而 非 虚拟 化 平台 。 


当 虚 拟 机 可 以 在 不 同 的 虚拟 化 平台 之 间 移 动 时 (例如 ， 在 VMware ESXi 和 AHV 之 间 ) ， 管 理 员 可 以 在 不 同 的 虚拟 化 平台 上 分 别 托管 生产 和 开发 /测试 环境 ， 并 根据 需要 移动 工作 负载 。AMF 
通过 在 Nutanix 群 集中 的 CVM 内 运行 的 分 布 式 横向 扩展 服务 实现 一 键 式 地 将 VMware ESXi 虚 拟 化 平台 转化 成 AHV 平 台 且 保持 虚拟 机 的 可 用 性 ;此 外 还 可 以 实现 在 VMware ESXi 虚 拟 化 平台 和 
AHV 平 台 之 间 的 异步 容 灾 复 制 ， 帮 助 用 户 降低 容 灾 系统 的 建设 成 本 。 


AMF 的 Cloud Connect 可 以 将 虚拟 化 平台 的 虚拟 机 备份 到 AW3 或 者 Azure 公 有 云 环境 ;在 撰写 本 章 时 ，Nutanix 发 布 了 Xi 服务 ， 此 服务 允许 用 户 将 私有 云 虚拟 机 容 灾 复制 到 Nutanix 提 供 的 
公有 云 环境 。 


随 着 AMF 功 能 的 不 断 发 展 完善 ， 可 以 简化 数据 中 心 基础 架构 管理 复杂 度 ， 减 轻 IT 管 理 人 员 的 工作 量 ， 让 他 们 能 释放 更 多 精力 进行 业务 创新 。 


2.2.2 Prism 软件 


Prism 是 Nutanix 统 一 管理 平台 ， 它 基于 HTML5 开 发 ， 通 过 Web 界 面 登录 。 除 了 配置 、 监 控 和 管理 虚拟 化 环境 以 及 相关 的 计算 、 网 络 、 存 储 资 源 之 外 ，Prism 还 可 以 监控 管理 多 个 集群 ， 甚 
至 异 构 Hypervisor 的 集群 ， 同时 Prism 也 提供 先进 的 数据 分 析 能 力 ， 利 用 机 器 学 习 技 术 ，Prism 可 以 为 管理 员 提 供 系统 各 个 方面 运行 维护 的 深入 分 析 及 建议 。 


Prism 包 含 Prism Central 和 Prism Element 两 种 组 件 ， 它 们 之 间 的 逻辑 关系 如 图 2-5 所 示 。 
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图 2-5 Prism Centtal 和 了 Prism Element. IA] $2 37 44 X A 


: Prism Central: 多 个 集群 的 统一 管理 平台 ， 通 过 单一 的 、 中 心 化 的 管理 接口 负责 管理 多 个 Nutanix 集 群 。Prism Central 是 一 个 虚拟 机 ， 可 以 选择 部 署 在 Nutanix 集 群 之 上 或 集群 外 部 。 


: Prism Element: 本 地 集群 统一 管理 平台 ， 负 责 本 地 集群 的 管理 和 运行 ， 每 个 Nutanix 集 群 都 内 置 了 Prism Element， 分 布 式 运行 在 集群 所 有 节点 上 的 CVM 中 。 
2.2.2.1 Prism Central 


Prism Central 提 供 统一 界面 监控 和 管理 多 个 Nutanix 集 群 ， 既 可 以 是 不 同 地 理 位 置 的 集群 ， 也 可 以 是 不 同 Hypervisor 的 异 构 集群 。 对 于 大 规模 或 者 分 布 式 部 署 (例如 超过 一 个 集群 或 多 个 站 
点 的 情况 ) 的 环境 ， 推 荐 采用 Prism Central 简 化 管理 操作 ， 使 用 一 个 管理 界面 管理 所 有 集群 和 站 点 。 


Prism Central 高 级 功能 包括 自 定义 仪表 板 、 一 键 式 的 容量 趋势 分 析 (容量 倒计时 ) 、 一 键 式 的 容量 规划 、 多 集群 升级 以 及 高 级 搜索 等 。 


一 键 式 容量 趋势 分 析 (容量 倒计时 ) 功能 显示 了 容量 指标 的 历史 消耗 以 及 预 估 的 容量 消耗 倒计时 天 数 。 容 量 倒计时 是 指 某 类 资源 完全 消耗 之 前 剩余 的 天 数 。Nutanix 使 用 X-FIT 算 法 根据 历史 
数据 执行 容量 预测 计算 ， 如 图 2-6 所 示 。 
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一 键 式 的 容量 规划 将 自动 分 析 新 工作 负载 对 集群 的 资源 使 用 情况 的 影响 ， 并 使 用 来 自 X-FIT 和 工作 负载 模型 的 数据 ， 进 行 计 算 分 析 ， 形 成 扩容 建议 和 报告 ， 如 图 2-7 所 示 。 
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图 2-7 即时 容量 建 模 预 测 


高 级 搜索 功能 为 Nutanix 环 境 提 供 类 似 互联 网 搜索 引 警 的 使 用 体验 。 管 理 员 可 以 简单 地 在 搜索 栏 中 输入 关键 字 、 性 能 指标 等 ， 搜 索 结果 显示 在 四 个 垂直 列 中 ， 每 个 列表 示 与 搜索 查询 相关 的 
不 同类 型 的 结果 ， 如 图 2-8 所 示 。 
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Delete centili-base-clone Unregistering a VM on a Hyper-V Cluster 
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图 2-8 ”Nutanix 全 局 搜索 


2.2.2.2 Prism Element 


Prism Element 属 于 Nutanix 集 群 的 一 部 分 ， 可 管理 单个 集群 ， 在 单一 管理 控制 人 台 上 统一 进行 硬件 、 存 储 、 虚 拟 化 、 数 据 保护 、 健 康 检查 等 管理 操作 ， 如 图 2-9 所 示 。 
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图 2-9 Prism Element d 7 


Nutanix 在 主要 通过 软件 与 硬件 一 体 化 的 超 融 合 设备 方式 进行 销售 ，OEM 合 作 伙 伴 如 联想 和 Dell 也 单独 提供 Nutanix 软 件 。 近 年 来 ， 也 逐渐 通过 发 布 服务 器 兼容 列表 的 方式 单独 提供 软件 。 


2.2.3.1 ”硬件 与 集群 构成 


Nutanix 产 品 的 硬件 形态 是 1U 或 2U 的 机 箱 (block) 设备 ， 根 据 型 号 不 同 ，2U 的 block 里 可 能 包含 1、2、4 个 节点 (node) ， 每 个 节点 就 是 一 个 独立 的 x86 服 务 器 。Nutanix 集 群 
(cluster) 如 图 2-10 所 示 ， 机 框 内 深 色 标记 的 就 是 一 个 节点 ， 一 个 机 框 又 称 为 “机 箱 ”， 对 于 一 个 Nutanix 集 群 来 说 ， 最 少 由 3 个 节点 组 成 。 


eA (node) 


e tB (block) 


。 集 群 (cluster) 


图 2-10 节点、 机 箱 、 集 群 介绍 


Nutanix HCI 产 品 硬件 基于 标准 的 X86 平台 ， 每 节点 都 配备 CPU、 内 存 以 及 固态 硬盘 (SSD) 与 机 械 磁 盘 (HDD) 。 机 箱 内 节点 彼此 独立 ， 仪 共享 元 余 电 源 和 风扇 ， 节 点 之 间 的 数据 交互 依 
赖 外 部 的 万 兆 交换 机 网 络 互 联 。 以 图 2-11 中 列 出 的 Nutanix 硬 件 型 号 NX-3060 为 例 ， 根 据 业 务 成 长 预期 及 资源 增长 需求 ，IT 部 门 可 以 通过 添加 节点 的 方式 实现 超 融 合资 源 池 的 横向 扩容 ， 当 集群 
规模 需要 由 四 节点 扩展 到 五 节点 时 ， 只 需要 采购 包含 一 个 节 扣 的 机 箱 即 可 满足 要 求 。 


计算 资源 : 
最 高 可 配置 2x36 核 CPU 
最 高 可 配置 1TB 内 存 
存储 资源 : 
SSD: 2 块 480/960/1920/3840 GB; 


HDD: 4 块 1/2TB 
控制 器 : Nutanix Controller VM 


图 2-11 Nutanix 产 品 硬件 形态 
Nutanix 的 一 个 集群 里 可 以 有 不 同型 号 、 不 同 配 置 的 节点 和 机 箱 ， 并 且 支 持 全 闪 节 点 和 混合 节点 部 署 在 同一 集群 内 使 用 ， 以 满足 不 同 工 作 负 和 载 的 性 能 需求 变化 和 新 的 扩容 需求 。 
2.2.3.0 Nutanix NX 系列 产品 介绍 


Nutanix 自 有 品牌 的 硬件 系列 主要 包括 NX-1000、NX-3000、NX-6000 和 NX-8000， 如 图 2-12 所 示 。 上 述 所 有 系列 的 设备 均 支 持 全 闪 模 式 (全 部 配置 为 SSD， 无 HDD) 以 及 混合 模式 (BÀ 
有 SSD， 又 有 HDD) 。 不 同 的 硬件 系列 可 以 满足 不 同 的 业务 场景 和 业务 需求 。 
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图 2-12 Nutanix NX 超 融合 硬件 系列 


2.2.3.3 Nutanix OEM 产 品 介绍 


- 联想 HX 系列 


联想 超 融 合 HX 系 列 设备 为 企业 数据 中 心 提供 业界 功能 最 丰富 的 超 融 合 系统 。HX 使 用 联想 System x 平台 ， 集 成 Nutanix 软 件 ， 提 供 企业 存储 特性 、 数 据 保护 、 容 灾 恢 复 能 力 、 简 单 易 用 的 管 
理 界面 、 分 析 功 能 以 及 安全 性 。 联 想 HX 的 硬件 型 号 如 图 2-13 所 示 。 


. Dell XC 系列 
Dell 和 Nutanix 从 2014 年 开始 OEM 合 作 ， 并 推出 XC 系列 超级 融合 设备 ， 集 成 了 Dell PowerEdge 服 务 器 和 Nutanix 软 件 ， 为 用 户 提供 超 融 合 系统 解决 方案 。 


图 2-14 列 出 了 Dell XC 系列 的 各 个 型 号 的 超 融 合 设备 的 规格 、 适 用 工作 负载 以 及 应 用 场景 等 。 
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图 2-13 ”联想 HX 系列 超 融 合 产 品 
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图 2-14 Dell XC 系 列 超 融 合 产品 


2.2.3.4” 纯 软件 模式 


Nutanix 致 力 于 协助 客户 摆脱 IT 基 础 架构 的 孤岛 ， 并 使 用 企业 云 的 方式 来 简化 IT 管 理 ， 增 加 IT 基 础 架构 弹性 、 敏 捷 性 和 可 靠 性 。 因 此 ，Nutanix 也 推出 针对 特定 硬件 平台 的 纯 软件 销售 模式 。 


在 撰写 本 书 时 ，Nutanix 纯 软件 模式 已 经 支持 Cisco UCS B 系 列 和 CC 系列 服务 器 ， 同 时 也 即将 对 HPE ProLiant DL 系列 和 IBM CS 系列 的 特定 服务 器 型 号 提供 Nutanix 软 件 的 支持 。 


通过 推出 纯 软件 销售 模式 ， 可 以 让 用 户 在 选择 超 融合 以 构 时 有 更 多 品牌 和 型 号 的 物理 设备 供 选 择 。 


2.3 Nutanix 技 术 原 理 


2.3.1 ”Nutanix 系 统 设计 架构 


2.3.1.1 Nutanix 系 统 架 构 概述 
Nutanix 的 分 布 式 设 计 理念 从 分 布 式 人 存储 系统 贯穿 到 虚拟 化 平台 和 资源 管理 领域 。Nutanix 系 统 设 计 旨 在 解 耦 平台 与 上 应用， 同时 又 提供 至 简 的 管理 能 力 。 


Nutanix 节 点 基于 x86 硬 件 平台 ， 包 含 本 地 SSD、HDD、CPU、 内 存 组 件 ,平台 之 上 可 以 运行 多 种 Hypervisor， 包 括 ESXi、Hyper-V、AHV 或 者 XenServer。Nutanix 软 件 运 行 在 CVM 
中 ，CVM 是 一 个 连接 存储 控制 器 功能 的 虚拟 机 ， 利 用 Intel VT-d 将 SSD 和 和 HDD 设备 的 SCSI 控 制 器 直接 传 到 CVM 进 行 管理 ， 为 虚拟 化 平台 上 的 所 有 I/O 操 作 及 其 上 运行 的 所 有 虚拟 机 提供 服务 。 


用 户 虚 拟 机 


FAR I/O 


Hypervisor 


SCSI 控制 器 


图 2-15 ”节点 逻辑 架构 


图 2-15 是 一 个 典型 的 Nutanix 节 点 的 逻辑 图 ，Nutanix 将 传统 的 存储 功能 (重复 数据 删除 、 压 缩 、 纠 删 码 等 ) 通过 软件 的 方式 实现 ， 软 件 运行 在 CVM 内 ， 这 就 意味 着 要 把 存储 的 关键 处 理 逻 
辑 从 专 有 硬件 中 剥离 出 来 ， 并 通过 软件 方式 基于 x86 硬 件 设备 来 实现 。 


分 布 式 系统 具备 三 个 核心 的 理念 : 

1. 必 须 无 单 点 故障 。 

2. 必 须 在 任意 规模 没有 任何 瓶 矣 (必须 可 以 线性 扩展 ) 。 
3. 必 须 利用 并 行 执行 (如 MapReduce 机 制 ) 。 


通过 高 速 网 络 连 接 ， 一 组 Nutanix 节 点 构成 了 一 个 分 布 式 系统 (Nutanix 集 群 ) 以 提供 Prism 和 Acropolis 的 功能 。 所 有 的 服务 和 组 件 都 分 布 在 CVM 里 以 提供 高 可 靠 和 性 能 线性 扩展 的 能 力 。 
图 2-16 展 示 了 多 个 节点 是 如 何 组 成 Nutanix 集 群 的 。 


SCSI 控制 器 Controller 
VM 
CPU , 
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图 2-16 ”集群 逻辑 架构 


通过 元 数据 和 数据 分 布 在 所 有 的 节点 和 所 有 的 存储 硬盘 上 ， 可 以 确保 数据 读 写 和 重建 时 有 最 高 的 性 能 。 这 种 分 布 式 确保 了 Nutanix 的 MapReduce 框 架 可 以 利用 集群 的 最 大 能 力 来 并 行 执 行 
诸如 数据 重建 、 数 据 压 缩 、 纠 删 码 、 重 复数 据 删除 等 活动 。 


2.3.1.2 ”Nutanix 集 群 组 件 


Nutanix DSF 由 诸多 的 服务 组 件 构成 ， 这 些 组 件 运 行 在 集群 中 各 个 节点 上 的 CVYM 中 ， 通 过 共同 的 协作 支撑 分 布 式 集群 的 整体 服务 和 功能 。 有 趣 的 是 ， 这 些 组 件 的 名 字 大 多 来 自 希 腊 神 话 、 
好 莱 坞 大 片 、 动 画 电影 中 的 人 物 和 道具 ， 通 过 这 种 方式 形象 地 阐述 了 Nutanix 的 各 个 服务 组 件 。 


Nutanix 平 台 由 五 个 组 件 构成 ， 分 别 是 处 理 MO 的 stargate、 存 放 元 数据 的 Cassandra、 管 理 集 群 的 界面 Prism、 人 存储 集群 配置 信息 的 Zookeeper， 以 及 做 集群 清理 和 优化 的 Curator， 各 个 
组 件 间 可 以 相互 协作 与 配合 ， 如 图 2-17 所 示 。 
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图 2-17 Nutanix 的 集群 组 件 
: Stargate 
| 角色 : 数据 I[/ 〇 管理 。 
来源: Stargate 直 译 为 星际 之 门 ， 是 分 布 式 存 储 中 1/ 〇 的 管理 单元 。 
: 描述 : Stargate 负 责 所 有 来 自 Hypervisor 的 I/O 〇 处 理 ， 无 论 是 通过 NFS、iSCSI 或 SMB 协 议 ， 其 主要 提供 本 地 I/O 〇 操作 的 能 力 ， 集 群 中 所 有 节点 都 运行 此 服务 。 
- Cassandra 
&: 分 布 式 元 数据 存储 数据 库 。 
- 来 源 : Cassandra 是 业界 知名 的 开源 分 布 式 数据 库 之 一 ， 这 个 名 字 来 自 希 腊 神 话 中 的 女 预 言 


: 描述 : Cassandra 组 件 基 于 大 量 修改 过 的 Apache Cassandta， 是 分 布 式 、 可 扩展 的 非 关 系 型 NoSQL 数 据 库 ， 采 用 Key-Value 的 结构 便于 高 效 查 询 ， 以 环 状 的 方式 存放 和 管理 所 有 的 集群 元 数据 。 
用 Paxos 算 法 来 保证 严密 的 一 致 性 。 在 集群 中 所 有 节点 上 都 运行 着 这 个 服务 。 一 份 数 据 的 元 数据 ， 需 要 通过 3 个 或 5 个 节点 分 布 存放 (取决 于 是 RF2 还 是 RF3) 。 


: Zookeeper 
角色 : 集群 配置 管理 。 


(RR: 动物 管理 员 。 始 创 于 Yahoo 云 平台 管理 项 目 组 。 因 为 在 云 平 台 里 ,很 多 功能 模块 都 参考 动物 名 称 予 以 命名 。 随 着 模块 的 增多 ， 需 要 一 个 管理 角色 进 。 因 此 ZooKeepet 的 名 字 就 
此 诞生 。 


- 描述 : 基于 Apache Zookeepet 实 现 ，Zookeepet 存 放 了 所 有 的 集群 配置 信息 ， 包 括 主机 、IP 地 址 和 状态 等 。 deans 具体 取决 于 集群 应 用 的 RF 系数 。 多 节点 的 使 
用 可 以 预防 过 期 数据 返回 其 他 组 件 ， 同 时 ， 奇 数 节 点 数 可 以 在 两 个 节点 包含 不 同 信息 时 提供 仲裁 。Zookeepet 没 有 任何 依赖 项 ， 这 意味 着 它 可 以 在 没有 任何 其 他 集群 组 件 运行 的 情况 下 启动 。 集 
群 中 有 3 个 或 5 个 节点 会 运行 此 服务 ， 其 中 的 一 个 被 选举 成 leadef。leadef 接 收 所 有 请 求 并 转发 到 其 他 的 成 员 。 一 旦 leadef 失 去 了 反应 ， 新 的 leadeft 会 被 自动 选举 出 来 。 


- Curator 
: fh &: 以 MapReduce 方 式 管理 和 清理 集群 。 
. 来 源 : 博物 馆 馆 长 ， 这 个 服务 就 像 在 后 台 工 作 的 保姆 和 监护 人 。 负 责 硬盘 整理 、 扇 区 扫描 等 后 台 维 护 服务 的 分 配 和 调度 。 


: 描述 : Curator 负 责 在 整个 集群 范围 内 的 任务 分 配 和 调度 ， 诸 如 硬盘 容量 平衡 、 主 动 清理 、 硬 件 故障 引发 的 数据 重建 等 。Curator 在 每 个 节点 上 运行 ， 而且 受 选 定 的 Curator Leadet 的 控 
制 ，Curator Leadet 会 负责 任务 和 作业 的 委派 。Curatotr 有 两 种 扫描 类 型 ， 每 6 小 时 一 次 全 扫描 和 每 小 时 一 次 的 部 分 扫描 。Cutrator 扫 描 后 会 把 必要 的 任务 分 配给 Stargate 来 完成 复制 或 优化 的 工作 ， 此 外 
Curatot 自 身 也 负责 清理 任务 ， 如 删除 Cassandta 中 过 期 的 元 数据 。 


: Prism 
- 角色: 用 户 界 面 和 API。 
来 源 : Prism 是 棱柱 的 意思 。 负 责 融 合 系统 管理 平台 展现 。 一 束 光 经 过 棱柱 后 折射 出 多 束 彩 光 。 


- 描述 : Prism 是 各 组 件 的 管理 网 关 ， 它 让 管理 员 能 配置 和 监控 Nutanix 集 群 。 它 提供 多 种 管理 手段 ， 如 nCLI[、HTMIL5 UI 和 REST API (支持 PowetShell、Java 和 Python) 。Ptism 运 行 在 集群 中 
的 每 个 节点 ， 如 同 集群 中 其 他 组 件 一 样 leadet 也 通过 选举 制 产生 。 


在 Nutanix 集 群 的 CVM 里 运行 的 服务 多 达 29 个 ， 介 绍 完 上 述 5 个 核心 集群 组 件 ， 下 面 我 们 再 介绍 一 些 和 5 大 组 件 相关 的 服务 ， 便 于 大 家 更 好 地 理解 Nutanix DsF 的 集群 服务 是 如 何 运作 的 ， 
如 图 2-18 所 示 。 
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图 2-18 Nutanix DSF 的 集群 服务 组 件 


在 图 2-18 中 ， 大 家 可 以 找到 上 述 介绍 的 5 大 组 件 ， 其 中 Medusa store 就 是 Cassandra， 另 外 还 有 其 他 的 服务 ， 比 如 Genesis、Cerebro、Chronos、Pithos 等 ， 它 们 各 司 其 职 ， 彼 此 合作 ， 
共同 保障 集群 的 功能 和 稳定 运行 。 此 外 还 有 Medusa、Zesus 这 些 重要 的 访问 协议 ， 用 于 重要 组 件 之 间 的 交互 。 


- Genesis 
. 角色 : 集群 组 件 和 服务 管理 。 
. 来 源 : Genesis 是 起 源 的 意思 。 这 个 进程 主要 负责 群集 服务 启 停 等 操作 。 


描述: Genesis 是 一 个 负责 初始 化 配置 和 服务 交互 (如 staft、stop 等 ) 的 进程 ， 它 是 “管理 服务 的 服务 ”， 运 行 在 每 个 节点 上 。Genesis 不 依赖 于 集群 ， 即 不 管 集群 是 否 配置 或 运行 ， 它 都 运 


行 着 (唯一 的 前 提 是 Zookeeper 必 须 处 于 运行 状态 ) 。Cluster_init 和 cluster_status 这 两 个 页 面 所 显示 的 信息 由 Genesis 服 务 提供 。 
« Cerebro 
AÉ: 数据 复制 和 容 灾 管理 。 
.来源 : Cerebto 是 大 脑 的 意思 ， 在 《X 战 警 》 里 是 脑 波 增幅 器 。 戴 在 脑袋 上 ， 可 以 远 距离 视察 、 感 受 万 物 ， 用 来 比喻 远程 站 点 的 数据 同步 和 容 灾 功 能 。 


- 描述 : Cerebro 负 责 DSF 中 的 数据 复制 和 容 灾 管 理 部 分 ， 包 含 快照 的 调度 、 远 程 站 点 的 数据 同步 及 站 点 的 迁移 和 故障 切换 。Cerebro 运 行 在 Nutanix 集 群 的 每 个 节点 上 ， 并 且 每 个 节点 都 参与 远 
程 站 点 /集群 的 数据 同步 。 


- Chronos 
: 来 源 : Chronos 是 希腊 神话 中 时 间 之 神 的 名 字 ， 主 要 负责 计划 和 调度 。 


: 描述 : Chronos 与 Curatot 联 系 紧密 ， 也 是 个 后 人 台 的 服务 ， 负 责 把 由 Curator 扫 描 产 生 的 任务 在 节点 间 调 度 执行 并 合理 分 配给 集群 内 不 同 节点 上 的 Stargate。Chronos 运 行 在 每 个 节点 上 ， 受 控 于 


leader Chronos (负责 任务 委托 且 和 leader Curator 运 行 在 同一 节点 ) 。 
Pithos 
- 角色 : vDisk 配 置 管理 。 
C 来 源 : Pithos 源 于 希腊 美惠 女神 之 一 ， 负 责 在 分 布 式 系 统 内 创建 vDisk 的 后 台 服 务 。 
- 描述 : Pithos 负 责 vDisk (DSF XR) 的 配置 数据 。Pithos 构 建 于 Cassandta 之 上 ， 并 运行 于 每 个 节点 。 
- Medusa 
角色: 与 Cassandra 交 互 的 访问 协议 。 
来源: Medusa 是 希腊 神话 中 的 监护 女神 或 保护 者 ， 可 联想 到 保护 最 关键 的 Cassandra 数 据 库 ， 所 以 是 其 他 组 件 和 Cassandra 交 互 的 使 者 。 


描述: Medusa 是 Nutanix 集 群 的 抽象 屋 ， 提 供 Nutanix 的 元 数据 数据 库 Cassandra 数 据 库 的 访问 ， 无 论 是 Stargate 还 是 Curatot 想 要 和 Cassandra 数 据 库 交互 信息 都 需要 通过 Medusa。Medusa 提 供 访问 
元 数据 的 数据 库 Cassandta 的 访问 协议 。 


: Zeus 
| f86&: 与 Zookeepet 交 互 的 访问 协议 。 
RR: 宙斯 是 众 神 之 神 ， 可 以 联想 为 负责 众 神 之 间 的 沟通 ， 进 而 联想 到 负责 组 件 和 Zookeepet 的 沟通 


- 描述 : Zeus 用 于 其 他 组 件 对 Zookeepet 的 访问 ， 可 以 通过 Zeus 查 询 到 Zookeepet 里 的 集群 配置 。 


2.3 Nutanix 技 术 原 理 


2.3.1 ”Nutanix 系 统 设计 架构 


2.3.1.1 ”Nutanix 系 统 架 构 概 述 


Nutanix 的 分 布 式 设 计 理念 从 分 布 式 人 存储 系统 贯穿 到 虚拟 化 平台 和 资源 管理 领域 。Nutanix 系 统 设计 旨 人 在 解 耦 平台 与 应 用 ， 同 时 又 提供 至 简 的 管理 能 力 。 


Nutanix 节 点 基于 x86 硬 件 平台 ， 包 含 本 地 SSD、HDD、CPU、 内 存 组 件 ,平台 之 上 可 以 运行 多 种 Hypervisor， 包 括 ESXi、Hyper-V、AHV 或 者 XenServer。Nutanix 软 件 运 行 在 CVM 
中 ，CVM 是 一 个 连接 存储 控制 器 功能 的 虚拟 机 ， 利 用 Intel VT-d 将 SSD 和 和 HDD 设备 的 SCSI 控 制 器 直接 传 到 CVM 进 行 管理 ， 为 虚拟 化 平台 上 的 所 有 I/O 操 作 及 其 上 运行 的 所 有 虚拟 机 提供 服务 。 


用 户 虚拟 机 


— 


Hypervisor 


图 2-15 ”节点 逻辑 架构 


图 2-15 是 一 个 典型 的 Nutanix 节 点 的 逻辑 图 ，Nutanix 将 传统 的 存储 功能 〈 重 复数 据 删除 、 压 缩 、 纠 删 码 等 ) 通过 软件 的 方式 实现 ， 软 件 运 行 在 CVM 内 ， 这 就 意味 着 要 把 存储 的 关键 处 理 逻 
辑 从 专 有 硬件 中 剥离 出 来 ， 并 通过 软件 方式 基于 x86 硬 件 设备 来 实现 。 


分 布 式 系统 具备 三 个 核心 的 理念 : 

1. 必 须 无 单 点 故障 。 

2. 必 须 在 任意 规模 没有 任何 瓶颈 (必须 可 以 线性 扩展 ) 。 
3. 必 须 利用 并 行 执行 (如 MapReduce 机 制 ) 。 


通过 高 速 网 络 连接 ， 一 组 Nutanix 节 点 构成 了 一 个 分 布 式 系统 (Nutanix 集 群 ) 以 提供 Prism 和 Acropolis 的 功能 。 所 有 的 服务 和 组 件 都 分 布 在 CVM 里 以 提供 高 可 靠 和 性 能 线性 扩展 的 能 力 。 
图 2-16 展 示 了 多 个 节点 是 如 何 组 成 Nutanix 集 群 的 。 
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图 2-16 ”集群 逻辑 架构 


通过 元 数据 和 数据 分 布 在 所 有 的 节点 和 所 有 的 存储 硬盘 上 ， 可 以 确保 数据 读 写 和 重建 时 有 最 高 的 性 能 。 这 种 分 布 式 确 保 了 Nutanix 的 MapReduce 框 架 可 以 利用 集群 的 最 大 能 力 来 并 行 执 行 
诸如 数据 重建 、 数 据 压 缩 、 纠 删 码 、 重 复数 据 删除 等 活动 。 


2.3.1.2 ”Nutanix 集 群 组 件 


Nutanix DSF 由 诸多 的 服务 组 件 构成 ， 这 些 组 件 运 行 在 集群 中 各 个 节点 上 的 CVM 中 ， 通 过 共同 的 协作 支撑 分 布 式 集群 的 整体 服务 和 功能 。 有 趣 的 是 ， 这 些 组 件 的 名 字 大 多 来 自 希腊 神话 、 
好 莱 坞 大 片 、 动 画 电影 中 的 人 物 和 道具 ， 通 过 这 种 方式 形象 地 前 述 了 Nutanix 的 各 个 服务 组 件 。 


Nutanix 平 台 由 五 个 组 件 构成 ， 分 别 是 处 理 |/O 的 Stargate、 和 存放 元 数据 的 Cassandra、 管 理 集群 的 界面 Prism、 和 存储 集群 配置 信息 的 Zookeeper， 以 及 做 集群 清理 和 优化 的 Curator， 各 个 
组 件 间 可 以 相互 协作 与 配合 ， 如 图 2-17 所 示 。 


Hypervisor/ 客户 端 浏览 器 编排 
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图 2-17 Nutanix 的 集群 组 件 

: Stargate 
角色: 数据 I/O 管 理 。 
来源: Stargate 直 译 为 星际 之 门 ， 是 分 布 式 存 储 中 1/ 〇 的 管理 单元 。 
- 描述 : Stargate 负 责 所 有 来 自 Hypervisor 的 I/O 〇 处 理 ， 无 论 是 通过 NFS、iSCSI 或 MB 协议 ， 其 主要 提供 本 地 I/O 〇 操作 的 能 力 ， 集 群 中 所 有 节点 都 运行 此 服务 。 
- Cassandra 

&: 分 布 式 元 数据 存储 数据 库 。 
来源: Cassandra 是 业界 知名 的 开源 分 布 式 数据 库 之 一 ， 这 个 名 字 来 自 希 腊 神 话 中 的 女 预言 


- 描述 : Cassandra 组 件 基于 大 量 修改 过 的 Apache Cassandra， 是 分 布 式 、 可 扩展 的 非 关 系 型 NoSQL 数 据 库 ， 采 用 Key-Value 的 结构 便于 高 效 查 询 ， 以 环 状 的 方式 存放 和 管理 所 有 的 集群 元 数据 。 
用 Paxos 算 法 来 保证 严密 的 一 致 性 。 在 集群 中 所 有 节点 上 都 运行 着 这 个 服务 。 一 份 数据 的 元 数据 ， 需 要 通过 3 个 或 5 个 节点 分 布 存放 【取决 于 是 RF2 还 是 RF3) 。 


: Zookeeper 
角色 : 集群 配置 管理 。 


(RR: 动物 管理 员 。 始 创 于 Yahoo 云 平台 管理 项 目 组 。 因 为 在 云 平 台 里 ,很 多 功能 模块 都 参考 动物 名 称 予 以 命名 。 随 着 模块 的 增多 ， 需 要 一 个 管理 角色 进 。 因 此 ZooKeeper 的 名 字 就 


此 诞生 。 


- 描述 : 基于 Apache Zookeepet 实 现 ，Zookeepet 存 放 了 所 有 的 集群 配置 信息 ， 包 括 主 机 、IP 地 址 和 状态 等 。Zookeepet 在 三 个 或 五 个 节点 上 和 运行， 具体 取决 于 集群 应 用 的 RE 系数 。 多 节点 的 使 
用 可 以 预防 过 期 数据 返回 其 他 组 件 ， 同 时 ， 奇 数 节点 数 可 以 在 两 个 节点 包含 不 同 信息 时 提供 仲裁 。Zookeepet 没 有 任何 依赖 项 ， 这 意味 着 它 可 以 在 没有 任何 其 他 集群 组 件 运 行 的 情况 下 启动 。 集 
群 中 有 3 个 或 5 个 节点 会 运行 此 服务 ， 其 中 的 一 个 被 选举 成 leadetft。leadet 接 收 所 有 请 求 并 转发 到 其 他 的 成 员 。 一 旦 leadet 失 去 了 反应 ， 新 的 leadet 会 被 自动 选举 出 来 。 


- Curator 
: fh &: 以 MapReduce 方 式 管理 和 清理 集群 。 
. 来 源 : 博物 馆 馆 长 ， 这 个 服务 就 像 在 后 台 工 作 的 保姆 和 监护 人 。 负 责 硬盘 整理 、 扇 区 扫描 等 后 台 维护 服务 的 分 配 和 调度 。 


- 描述 : Curator 负 责 在 整个 集群 范围 内 的 任务 分 配 和 调度 ， 诸 如 硬盘 容量 平衡 、 主 动 清理 、 硬 件 故障 引发 的 数据 重建 等 。Curator 在 每 个 节点 上 运行 ， 而且 受 选 定 的 Curator Leadet 的 控 
制 ，Curator Leadert 会 负责 任务 和 作业 的 委派 。Curatotr 有 两 种 扫描 类 型 ， 每 6 小 时 一 次 全 扫描 和 每 小 时 一 次 的 部 分 扫描 。Curator 扫 描 后 会 把 必要 的 任务 分 配给 Stargate 来 完成 复制 或 优化 的 工作 ， 此 外 
Curatot 自 身 也 负责 清理 任务 ， 如 删除 Cassandta 中 过 期 的 元 数据 。 


: Prism 
- 角色: 用 户 界 面 和 API。 
来源: Prism 是 棱柱 的 意思 。 负 责 融 合 系统 管理 平台 展现 。 一 束 光 经 过 棱柱 后 折射 出 多 束 彩 光 。 


| 描述 : Prism 是 各 组 件 的 管理 网 关 ， 它 让 管理 员 能 配置 和 监控 Nutanix 集 群 。 它 提供 多 种 管理 手段 ， 如 nCLI[、HTMIL5 UI 和 REST API (支持 PowetShell、Java 和 Python) 。Prism 运 行 在 集群 中 
的 每 个 节点 ， 如 同 集群 中 其 他 组 件 一 样 leadet 也 通过 选举 制 产 生 。 


在 Nutanix 集 群 的 CVM 里 运行 的 服务 多 达 29 个 ， 介 绍 完 上 述 25 个 核心 集群 组 件 ， 下 面 我 们 再 介绍 一 些 和 5 大 组 件 相关 的 服务 ， 便 于 大 家 更 好 地 理解 Nutanix DsF 的 集群 服务 是 如 何 运作 的 ， 
如 图 2-18 所 示 。 
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图 2-18 Nutanix DSF 的 集群 服务 组 件 


在 图 2-18 中 ， 大 家 可 以 找到 上 述 介绍 的 5 大 组 件 ， 其 中 Medusa store 就 是 Cassandra， 另 外 还 有 其 他 的 服务 ， 比 如 Genesis、Cerebro、Chronos、Pithos 等 ， 它 们 各 司 其 职 ， 彼 此 合作 ， 
共同 保障 集群 的 功能 和 稳定 运行 。 此 外 还 有 Medusa、Zesus 这 些 重 要 的 访问 协议 ， 用 于 重要 组 件 之 间 的 交互 。 


- Genesis 
角色 : 集群 组 件 和 服务 管理 。 
:来源 : Genesis 是 起 源 的 意思 。 这 个 进程 主要 负责 群集 服务 启 停 等 操作 。 


描述 : Genesis 是 一 个 负 责 初 始 化 配置 和 服务 交互 (ke start. stop% ) 的 进程 ， 它 是 “管理 服务 的 服务 ” > 运行 在 每 个 节点 上 。 Genesis 不 依赖 于 集群 ， 即 不 管 集群 是 否 配 置 或 运行 ， 它 都 运 


行 着 (唯一 的 前 提 是 Zookeeper 必 须 处 于 运行 状态 ) 。Cluster_init 和 cluster_status 这 两 个 页 面 所 显示 的 信息 由 Genesis 服 务 提供 。 


- Cerebro 


角色 : 数据 复制 和 容 灾 管理 。 
来源: Cerebro 是 大 脑 的 意思 ， 在 《X 战 警 》 里 是 脑 波 增幅 器 。 戴 在 脑袋 上 ， 可 以 远 距离 视察 、 感 受 万 物 ， 用 来 比喻 远程 站 点 的 数据 同步 和 容 灾 功 能 。 


描述: Cerebro 负 责 DSF 中 的 数据 复制 和 容 灾 管 理 部 分 ， 包 含 快照 的 调度 、 远 程 站 点 的 数据 同步 及 站 点 的 迁移 和 故障 切换 。Cerebro 运 行 在 Nutanix 集 群 的 每 个 节点 上 ， 并 且 每 个 节点 都 参与 远 
程 站 点 /集群 的 数据 同步 。 


- Chronos 
角色: 任务 调度 。 
. 来 源 : Chronos 是 希腊 神话 中 时 间 之 神 的 名 字 ， 主 要 负责 计划 和 调度 。 


: 描述 : Chronos 与 Curatot 联 系 紧密 ， 也 是 个 后 人 台 的 服务 ， 负 责 把 由 Curator 扫 描 产 生 的 任务 在 节点 间 调 度 执行 并 合理 分 配给 集群 内 不 同 节点 上 的 Stargate。Chronos 运 行 在 每 个 节点 上 ， 受 控 于 
节 ， 


leader Chronos (负责 任务 委托 且 和 leadet Cutatot 运 行 在 同一 节点 ) 


- Pithos 

. 角色 : vDisk 配 置 管理 。 

. 来 源 : Pithos 源 于 希腊 美惠 女神 之 一 ， 负 责 在 分 布 式 系统 内 创建 vDisk 的 后 台 服 务 。 

描述 : Pithos 负 责 vDisk (DSF 文 件 ) 的 配置 数据 。Pithos 构 建 于 Cassandta 之 上 ， 并 运行 于 每 个 节点 。 
- Medusa 

角色: 与 Cassandta 交 互 的 访问 协议 。 


. 来 源 : Medusa 是 希腊 神话 中 的 监护 女神 或 保护 者 ， 可 联想 到 保护 最 关键 的 Cassandta 数 据 库 ， 所 以 是 其 他 组 件 和 Cassandta 交 互 的 使 者 。 


- 描述 : Medusa 是 Nutanix 集 群 的 抽象 屋 ， 提 供 Nutanix 的 元 数据 数据 库 Cassandra 数 据 库 的 访问 ， 无 论 是 Stargate 还 是 Curatot 想 要 和 Cassandra 数 据 库 交互 信息 都 需要 通过 Medusa。Medusa 提 供 访问 
元 数据 的 数据 库 Cassandta 的 访问 协议 。 


: Zeus 
角色: 与 Zookeeper 交 互 的 访问 协议 。 
来 源 : 宙斯 是 众 神 之 神 ， 可 以 联想 为 负责 众 神 之 间 的 沟通 ， 进 而 联想 到 负责 组 件 和 Zookeepet 的 沟通 。 


- 描述 : Zeus 用 于 其 他 组 件 对 Zookeepet 的 访问 ， 可 以 通过 Zeus 查 询 到 Zookeepet 里 的 集群 配置 。 


2.3.2 ”高 效 性 技术 特性 
2.3.2.1 可 扩展 元 数据 


集群 扩展 能 力 是 衡量 HCI 能 力 优 务 的 试金石 ，Nutanix 的 元 数据 管理 采用 环 状 的 可 扩展 结构 ， 保 证 了 集群 的 弹性 和 超 强 的 扩展 能 力 。 元 数据 是 “数据 的 数据 ”， 是 智能 系统 的 核心 ， 对 文件 
系统 或 存储 阵列 而 言 至 关 重要 。DSF 对 于 元 数据 的 处 理 要 求 严 格 的 一 致 性 、 可 伸缩 ， 支 持 大 规模 的 并 行 操作 。 


Nutanix 基 于 大 量 修改 的 Cassandra 平 台 来 存储 元 数据 和 其 他 必要 信息 。Cassandra 采 用 环 式 结构 并 复制 到 环 中 的 n 个 (n=3 或 5， 对 应 RF2 和 RF3) 对 等 位 置 。 确 保 数据 一 致 性 和 可 用 性 。 
Cassandra 是 NoSQL 数 据 库 ， 采 用 “ 环 状 ”的 键 值 结构 存储 重要 元 数据 及 其 他 平台 数据 (如 状态 等 ) 。 


当 元 数据 写 入 或 更 新 时 ， 写 入 或 更 新 的 行将 被 写 入 环 中 的 一 个 节点 ， 然 后 复制 到 n 个 对 等 节点 中 。 大 部 分 节点 同意 后 ， 内 容 才能 够 被 提交 ， 内 容 的 提交 是 采用 Paxos 一 致 性 算法 强制 执行 
确保 所 有 存储 的 数据 和 元 数据 的 一 致 性 。 


er 


图 2-19 显 示 了 在 一 个 4 节操 集群 中 ， 元 数据 的 写 入 和 更 新 操作 。 
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图 2-19 ”Cassandra 环 形 结 构 的 元 数据 写 入 或 更 新 


DSF 的 元 数据 数据 库 允 许 元 数据 被 集群 中 所 有 节点 共同 维护 。 并 且 使 用 “一 致 性 散 列 算法 ” (Consistent Hashing) 来 保证 当 节 点 数量 变化 时 ， 需 要 被 重新 映射 的 元 数据 量 最 少 。 当 节点 数 
量 从 4 个 增加 到 8 个 时 ， 新 节点 将 被 插入 环 中 各 个 旧 节 点 之 间 。 图 2-20 显 示 了 环 在 增加 节点 时 被 扩展 的 情况 。 
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图 2-20 ”Cassandra 横 向 扩展 


2.3.2.2 ”数据 本 地 化 


由 于 分 布 式 存储 架构 改变 了 传统 共享 存储 的 数据 访问 模式 ， 把 数据 离散 到 集群 内 不 同 的 节点 之 上 ， 虚 拟 机 访问 的 数据 可 能 不 在 本 节点 的 磁盘 上 ， 在 经 过 网 络 时 会 造成 一 定 的 带宽 占用 ， 并 带 
来 一 定 的 时 延 。Nutanix 用 数据 本 地 化 的 功能 解决 了 这 个 问题 ， 用 简单 的 话 描 述 数 据 本 地 化 就 是 “数据 跟着 应 用 走 ” 以 保障 大 多 数 的 数据 访问 都 在 本 地 节点 ， 最 小 可 能 地 占用 网 络 市 宽 。 


I/O 和 数据 的 本 地 化 (Data Locality) 提高 了 读 写 性 能 ， 所 有 的 读 、 写 |/O 请 求 都 由 VM 所 在 节点 的 本 地 磁盘 和 本 地 CVM 响 应 处 理 。 当 VM 由 一 个 节点 迁移 至 另 一 个 节点 时 (或 者 上 发生 HA 切 
换 时 ) ， 此 VM 的 数据 会 交 由 当前 所 在 节点 中 的 本 地 CVM 接 管 。 当 读 取 旧 的 数据 (存储 在 之 前 节点 的 CVYM 中 ) 时 ，I/O 请 求 将 通过 本 地 CVM 转 发 至 远 端 YVM。 所 有 的 写 I/O 都 将 在 本 地 CVM 中 
完成 。DSF 检 测 到 i/O 请 求 落 在 其 他 节点 时 ， 将 在 后 台 自 动 将 数据 移动 到 本 地 节点 中 ， 从 而 让 所 有 的 读 |/O 由 本 地 提供 服务 。 数 据 仅 在 读 取 到 时 才 进 行 搬迁 ， 进 而 避免 过 大 的 网 络 压力 ， 并 且 数 据 
迁移 造成 的 多 余 副本 会 通过 Curator 组 件 删除 。 图 2-21 展 示 了 数据 是 如 何 随 着 VM 于 移 的 。 
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图 2-21 ”数据 本 地 化 


2.3.2.3 ”高 效 快照 和 克隆 
传统 架构 的 快照 克隆 是 基于 LUN 的 ， 在 虚拟 化 环境 中 这 并 不 高 效 ，Nutanix 天 然 提 供 了 更 适合 虚拟 化 环境 的 、 基 于 VM 的 快照 和 克隆 。 


DSF 中 的 快照 和 克隆 均 利用 效率 最 高 的 写 时 重 定向 (redirect-on-write) 算法 提供 高 效 的 快照 和 克隆 ， 可 通过 VAAI、ODX、nCLI、REST、Prism 等 方式 调用 。 如 前 文 所 述 ，VM 的 构成 文 
件 (如 VMDK/VHDX) 在 Nutanix 平 台 上 表现 为 vDisk。vDisk 是 由 逻辑 上 连续 的 数据 块 Extent 构 成 ，Extent 存 放 在 Extent Group 里 ，Extent Group 是 物理 上 连续 的 数据 ， 在 人 存储 设备 里 以 文件 
形式 存放 。 当 快照 或 者 克隆 发 生 时 ，Base vDisk 被 标识 为 只 读 ， 克 隆 出 来 新 的 vDisk1 可 读 写 。 如 图 2-22 所 示 ，Base vDisk 和 vDisk1 有 相同 的 数据 块 指向 ， 它 是 元 数据 到 相应 Extent 的 映射 。 传 统 
的 方法 需要 遍历 快照 链 (因此 会 增加 读 延 迟 ) ， 而 现在 每 个 vDisk 有 它 自 己 的 数据 块 映 射 ， 消 除了 读 取 快照 链 的 开销 ， 人 允许 持续 地 进行 快照 而 不 影响 存储 性 能 。 如 果 有 新 的 写 入 ， 会 创建 新 的 数 
据 块 承载 写 入 的 数据 ，vDisk 的 元 数据 会 指向 相应 的 新 数据 块 。 
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图 2-22 ”快照 实例 
当 之 前 快照 或 克隆 过 的 VM 或 者 vDisk 再 次 进行 克隆 时 ， 当 前 的 块 映射 被 锁定 ， 新 的 克隆 被 创建 出 来 。 这 些 更 新 仅 仪 是 元 数据 ， 没 有 实际 的 |/O 友 生 。 


所 有 对 后 续 VM 或 者 vDisk 的 克隆 或 快照 的 写 或 者 更 新 操作 都 会 产生 新 的 数据 块 ， 并 更 新 自身 的 元 数据 映射 ， 如 图 2-23 所 示 。 


克隆 时 的 新 块 写 入 
BEES BEES 


图 2-23 ”克隆 -新 写 入 


2.3.2.4 智能 冷 热 数 据 分 层 

智能 数据 分 层 是 指数 据 由 被 访问 的 频 度 定义 为 热 数 据 或 冷 数据 ， 自 动 化 地 在 SSD 和 HDD 上 分 布 冷 热 数据 。 热 数据 被 保留 在 SSD 层 以 获得 最 大 MO 性 能 ， 变 为 冷 数据 后 会 被 迁移 到 HDD 层 ; 而 
冷 数据 被 保留 在 HDD 层 以 获得 最 佳 存储 成 本 ， 变 为 热 数据 后 会 被 重新 提升 到 SSD 层 。 

数据 分 层 在 集群 内 所 有 节点 的 SSD 和 HDD 上 实现 ， 这 意味 着 集群 内 任何 节点 都 可 以 使 用 到 整个 集群 的 存储 分 层 特性 。 本 地 节点 的 SSD 层 总 是 具有 最 高 优先 级 ， 负 责 所 有 本 地 虚拟 机 1/O 的 读 


写 操作 ， 并 且 还 可 以 使 用 集群 内 所 有 其 他 节点 上 的 SSD， 因 为 SSD 层 相 比 HDD 层 总 是 能 提供 更 好 的 读 写 性 能 ， 这 在 混合 模式 的 超 融 合集 群 中 尤为 重要 。 图 2-24 显 示 了 数据 分 层 优 先 级 顺序 。 
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顺序 1/O 将 跳 过 SSD， 直 接 写 入 HDD B 


图 2-24 DSF 层 级 优先 顺序 


DSF 的 信息 生命 周期 管理 (ILM) 也 会 持续 监控 数据 的 分 布 ， 其 会 在 必要 时 迁移 数据 ， 实 现 热 数据 的 本 地 化 读 取 。 


2.3.3 ”存储 容量 优化 技术 特性 


Nutanix DSF 的 容量 优化 引擎 (COE) 包括 纠 删 码 、 智 能 压缩 及 弹性 重复 数据 删除 。 这 些 技术 旨 在 提高 集群 的 实际 可 用 容量 ， 这 些 存 储 策略 可 随 Container 的 创建 开局 和 更 新 ， 策 略 具 备 自 
动 化 和 上 自 适 应 的 工作 特性 ， 无 须 手 动 配置 参数 。 
2.3.3.1 纠 删 码 


未 开启 容量 优化 功能 时 ，RF2 集 群 的 元 余 副本 容量 会 占用 50% 的 空间 ，RF3 和 集群 的 元 余 副本 容量 会 占用 66% 的 空间 ，Nutanix 提 供 了 纠 删 码 (EC) 来 对 数据 存储 进行 优化 处 理 ， 减 少 副 本 对 
容量 的 过 多 占用 ， 以 平衡 可 用 性 和 数据 容量 。 


与 RAID (级 别 4，5，6 等 ) 的 概念 类 似 ， 纠 删 码 使 用 数据 加 校 验 的 方式 提供 数据 元 余 性 。EC 通 过 对 不 同 节点 上 的 数据 块 条 带 进行 校 验 位 计算 和 编码 。 当 主机 或 者 硬盘 出 现 故 障 时 ，DSF 使 用 
校 验 位 和 其 他 节点 的 数据 块 计算 来 还 原 丢 失 的 数据 块 。 同 一 个 条 带 的 数据 块 必须 位 于 不 同 的 节点 ， 属 于 不 同 的 vDisk。 


通常 采用 < 数据 块 数量 >/< 校 验 块 数量 > 来 表示 条 带 配 置 (如 3/1，4/1，3/2，4/2) ， 基 于 不 同 的 见 余 因子 和 节点 数量 ， 条 带 大 小 可 由 管理 员 配 置 。 
例如 ，RF2 级 别 的 可 用 性 (N+1) 在 一 个 条 带 里 能 够 包括 3 个 或 者 4 个 数据 块 和 1 个 校 验 数据 块 ( 即 3/1 或 者 4/1) 。RF3 级 别 的 可 用 性 (N+2) 在 一 个 条 带 里 能 够 包括 3 个 或 者 4 个 数据 块 和 两 
个 校 验 数据 块 ( 即 3/2 或 者 4/2) 。 
说 明 管理 员 可 以 通过 nCLI Shell 命 令 来 修改 容器 的 纠 删 码 的 条 带 大 小 。 
条 带 尺 寸 会 随 着 节点 的 增加 和 移 除 动态 计算 。 之 所 以 用 命令 行 履 盖 ， 是 可 以 允许 管理 员 主 动 地 获得 容量 和 故障 时 数据 恢复 的 性 能 之 间 的 平衡 。 


纠 删 码 开销 可 以 用 < 校 验 块 数 量 >/< 数 据 块 数量 > 来 计算 。 例 如 ，4/1 的 条 市 有 25% 的 消耗 ， 或 者 是 1.25 (RF2 是 2 倍 ) 倍 容量 占用 。4/2 条 市 有 50% 的 开销 或 者 是 1.5 (RF3 是 3 倍 ) 倍 容量 
用 。 而 不 开 纠 删 码 功 能 的 RF2 集 群 的 容量 ， 副 本 占用 的 容量 开销 是 100%。 


表 2-1 列 出 了 常见 条 市 大 小 和 对 应 纠 删 码 开 销 的 例子 。 
表 2-1 纠 删 码 条 带 尺 寸 和 对 应 开销 举例 


FT1 (RF2 ) FT2 (RF3) 


集群 大 小 EC 条 市 大 小 EC 开销 EC 条 市 大 小 EC 开销 
UT ER EL) (数据 块 数量 / ( 相 比 RF2 的 (数据 块 数 量 / ( 相 比 RF3 的 
校 验 块 数量 ) 100% ) 校 验 块 数量 ) 200% ) 


2-25 展 示 了 一 个 4/1 和 3/2 条 带 的 例子 。 


一 个 条 带 由 多 个 来 自 不 同 的 虚拟 磁盘 ， 
不 同 节点 和 校 验 块 的 Extent Group 组 成 
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条 带 和 校 验 块 被 诸 出 来 ，Extent Group 的 副本 将 被 删除 以 节省 存储 


图 2-25 DSF 编码 条 带 化 -保存 前 


2-26 展 示 了 运行 EC 节省 存储 空间 后 的 环境 : 


< 
三 
三 


VM VM VM 
LU g m mw m 0 


口 
a 
a 
E 


日 校 验 块 


sj 
" 


5 m 
D 
"^u 
" 

s 
E> 

D ax 

8» m 

D 


Node Node Node Node 


E2-26 ” ”DSF 编码 条 带 化 -保存 后 
2.3.3.2 ”智能 压缩 
Nutanix 容 量 优 化 引擎 (COE) 是 实现 数据 优化 的 关键 特性 之 一 。COE 提 供 在 线 和 后 处 理 两 种 压缩 方式 满足 不 同 数据 类 型 的 压缩 需求 。 
在 线 压缩 是 在 数据 写 入 到 硬盘 之 前 ， 在 内 人 存 中 对 顺序 的 数据 流 或 大 MO 数据 块 进行 压缩 。 后 处 理 压缩 是 正常 写 数据 ， 然 后 利用 Curator 框 架 在 集群 学 围 内 压缩 数据 。 
当局 用 在 线 压缩 时 ， 随 机 I/O 数 据 写 入 OpLog 时 没有 压缩 ， 只 在 写 入 Extent Store 前 ， 在 内 存 里 进行 数据 整合 和 压缩 。 


图 2-27 展 现 了 一 个 在 线 压 缩 与 DSF 写 |/O 通 道 进行 交互 的 例子 。 
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图 2-27 在 线 压缩 I/ 〇 路 径 


对 于 后 处 理 压 缩 ， 所 有 的 写 /O 操 作 按照 正常 的 DsF 的 I/O 通 道 写 入 。 当 压缩 延迟 (管理 员 可 配置 ) 到 达 后 且 数 据 变 冷 时 进行 压缩 处 理 。 后 处 理 压缩 使 用 Curator 的 MapReduce 框 架 来 完 
成 ， 所 有 节点 参与 压缩 任务 。 


2-28 展 示 了 一 个 后 处 理 压缩 与 DSF 写 |/O 通 道 进行 交互 的 例子 。 


对 于 读 |/O， 数 据 首先 在 内 存 里 解压 为 |/O 提 供 服务 。 如 果 数 据 被 频繁 访问 ,数据 将 在 HDD 层 解压 ， 由 ILM 上 移 到 SSD 层 ,并且 在 Unified Cache 中 存放 。 


r /O 写 操 作 按 照 正常 的 路 径 瑟 数据 


| 
nm 
JO 中 


= JR | | 
与 操作 序 


Uniride 
Cache 


FEZELEIR EA Z JT E 
Extent Store 中 进行 数 握 压缩 


图 2-28 ”后 处 理 压 缩 I/ 〇 路 径 


可 以 在 Prism 的 存储 仪表 板 页 面 查看 当前 的 数据 压缩 比 。 
2.3.3.3 ”弹性 重复 数据 删除 


弹性 重复 数据 删除 引擎 是 DSF 中 一 个 关键 特性 ， 人 允许 在 容量 层面 (HDD) 和 性 能 层 (SSD/ 内 存 ) 对 数据 进行 重复 数据 删除 操作 。 顺 序数 据 在 写 入 时 ， 按 照 16KB 粒 度 进行 SHA-1 的 哈 希 
(Hash) 运算 标记 指纹 。 如 果 数 据 不 是 持续 写 入 〈 如 写 MO 操 作 ) ， 指纹 标 记 会 在 后 台 进 行 。 当 确定 为 重复 数据 后 ， 后 台 服 务 使 用 DSF 的 MapReduce 框 架 (Curator) 来 移 除 重复 数据 。 


传统 重复 数据 删除 操作 需要 在 后 台 进 行 数据 块 扫描 ， 数 据 需 要 重新 读 取 并 消耗 大 量 系统 资源 ，Nutanix 在 写 入 时 执行 在 线 的 指纹 标记 操作 。 重 复数 据 删 除 时 存储 的 重复 数据 块 可 以 被 直接 删 
除 ， 而 无 须 重新 读 取 和 计算 指纹 。 图 2-29 显 示 了 弹性 重复 数据 删除 引擎 如 何 扩展 和 处 理 本 地 虚拟 机 MO 请 求 。 
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| L -4. 数据 为 VO 本 地 化 而 移动 ” 注 : EBUCECET ANSOBS 
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图 2-29 ”弹性 重复 数据 删除 引擎 -扩展 性 


由 于 标记 指纹 的 数据 已 经 被 读 取 ， 会 被 保存 在 DSF 的 Unified Cache 中 。 任 何 后 续 对 于 同样 指纹 的 数据 请 求 将 直接 从 Cache 层 面 响应 。 图 2-30 展 示 了 弹性 重复 数据 删除 操作 如 何 优化 MO 操 
fF. 
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图 2-30 ”弹性 重复 数据 删除 引擎 I/O 路 径 


2.3.4 ”高 可 用 性 技术 特性 


2.3.4.1 数据 副本 机 制 


Nutanix 利 用 元 余 因 子 (RF) 机 制 来 保存 多 个 数据 副本 ， 集 群 内 所 有 的 节点 都 可 能 参与 复制 副本 的 工作 ， 共 同 保护 数据 和 元 数据 ，Nutanix 从 AOS 5.0 开 始 引 入 容错 级 别 (FT) 的 概 
念 ，FT1、FT2 对 应 不 同等 级 的 应 用 需求 ， 分 别 代 表 两 个 容错 等 级 。FT1 对 应 于 元 数据 RF3 和 数据 RF2，FT2 对 应 元 数据 RF5 和 数据 RF3。 


A) 


通过 将 元 数据 和 数据 分 布 在 所 有 节点 和 所 有 硬盘 上 ， 可 以 确保 最 高 可 用 性 能 。 当 数据 进入 系统 时 ， 数 据 及 其 副本 会 分 布 在 本 地 节点 和 所 有 远 端 节点 。 因 此 可 以 消除 潜在 的 热点 并 确保 一 致 的 
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2.3.4.2 ”数据 重建 和 路 径 风 余 


磁盘 或 者 节点 故障 时 ， 数 据 会 被 重新 保护 ， 集 群 会 全 力 进行 数据 重建 。 这 时 元 数据 扫描 (用 于 发 现 故 障 设备 上 的 数据 和 副本 位 置 ) 会 分 布 在 所 有 CVM 中 同时 进行 。 当 数据 副本 在 所 有 健康 
的 CVM 上 找到 后 ， 包 括 SSD、HDD 的 硬盘 设备 和 主机 网 络 可 以 并 行 工作 进行 数据 重建 。 


作为 分 布 式 系统 ，Nutanix DSF 内 置 了 处 理 组 件 、 服 务 和 CVM 故 障 的 能 力 ， 可 以 分 为 如 下 几 个 级 别 : 
- 硬盘 故障 
这 里 所 说 的 “硬盘 ”可 以 是 指 硬 件 的 存储 盘 ， 可 以 是 99D 固 态 硬盘 或 者 HDD 磁 盘 ， 硬 盘 故 障 有 如 下 几 种 情况 : 硬盘 被 拔除 、 硬 盘 故 障 、 无 响应 或 /O 错 误 。 


虚拟 机 影响 : 


. HA 事件 : 不 发 生 
-TOKKM: 不 发 生 
. 延迟 : 没有 影响 


当 Stargate 发 现 |/O 错 误 ， 或 硬盘 在 一 定 阅 值 内 没有 响应 时 ， 会 自动 标记 硬盘 下 线 。 硬 盘 故 障 时 ， 会 立即 触发 一 个 基于 MapReduce 框 架 的 Curator 扫 描 。 通 过 扫描 元 数据 (Cassandra) 以 
发 现 先前 保存 在 这 个 故障 硬盘 上 的 数据 在 哪些 节点 /硬盘 上 拥有 副本 。 一 旦 发 现 ， 则 立即 重新 复制 数据 。 鉴 于 Nutanix 把 数据 和 副本 分 散 到 所 有 节点 /CVM/ 硬 盘 上 ， 所 有 节点 /CVM/ 硬 盘 都 将 参 
与 到 数据 的 重新 复制 中 。 因 此 ， 这 也 减少 了 重新 回 到 数据 保护 状态 的 时 间 ， 集 群 规模 越 大 ， 重 建 速度 越 快 。 


- CVM 故 障 


系统 设计 本 身 可 以 透明 地 处 理 CVM 故 障 ， 如 CVM 的 电源 操作 引起 CVM 临 时 不 可 用 。 当 CVM 故 障 时 ，IMO 将 被 重 定向 到 集群 内 的 其 他 CVM 上。 有 具体 机 制 因 Hypervisor 不 同 而 各 异 。CVM 的 
滚动 升级 过 程 实际 上 利用 了 这 个 能 力 ， 每 次 升级 一 个 CVYM， 直 至 完成 整个 集群 的 升级 。 


虚拟 机 影响 : 

. HA 事件 : RRA 

OJ/O KW: 不 发 生 

. 延迟 : 由 于 1/O 经 过 网 络 ， 潜 在 的 高 延迟 


在 出 现 CVM 故 障 的 时 候 ， 由 原来 故障 CVM 处 理 的 MO 将 会 被 转发 到 集群 内 的 其 他 CVM 上 。ESXi 和 Hyper-V 是 通过 一 个 叫 CVM Autopathing 的 进程 来 处 理 的 ， 通 过 这 个 进程 来 修改 路 由 ， 
把 原本 发 送 到 内 部 地 址 (192.168.5.2) 的 数据 包 转 发 到 集群 里 其 他 CVM 的 外 部 地 址 。 这 样 使 得 数据 存储 保持 不 变 ， 只 是 |/O 由 远程 CVYM 来 处 理 。 


一 旦 本 地 CVM 恢 复 正 常 并 且 稳 定 运 行 ， 之 前 的 路 由 将 被 删除 ， 本 地 CVM 也 将 接管 新 的 I/O。 


针对 AHV， 由 于 其 利用 iSCSI 提 供 存 储 ， 因 上 v 会 借助 1SCSI 多 路 径 技术 ( 主 路 径 连 接 到 本 地 CVM ， 同 时 具备 两 个 远程 路 径 ) ， 当 主 路 径 故 障 时 ， 其 中 一 个 远程 路 径 将 被 激活 。 类 似 于 ESXi 和 
Hyper-V 的 自动 路 径 技术 ， 当 本 地 CVM 恢 复 正 常 后 ， 本 地 CVM 将 接管 成 主要 路 径 。 


节点 故障 

虚拟 机 影响 : 

| HA 事件 : RE 
.I/O 失败 : FRE 
- 3E5R: 没有 影响 


如 果 一 个 节点 失效 ,虚拟 机 HA 机 制 将 被 启动 ， 将 会 在 另外 的 节点 上 重新 启动 虚拟 机 。 一 旦 被 重新 启动 ， 虚 拟 机 将 在 本 地 CVM 接 管 下 继续 提供 服务 。 类 似 于 硬盘 失效 ， 在 节点 失效 的 情况 
下 ，Curator 组 件 会 立即 进行 元 数据 扫描 ， 并 让 所 有 可 用 节点 参与 数据 的 重新 复制 。 当 节点 故障 持续 一 段 时 间 (30 分 钟 ) ， 失 效 的 CVM 将 从 元 数据 环 中 移 除 ， 当 节点 恢复 和 稳定 一 段 时 间 
后 ，CVM 将 被 重新 加 回 元 数据 环 中 。 


2.3.4.3 机箱 感 知 


如 2.3.4.1 节 中 对 于 数据 副本 机 制 的 介绍 ，Nutanix DSF 通 过 在 多 个 节点 上 分 布 保存 数 据 副本 的 方式 来 实现 数据 元 余 。 默 认 情 况 下 ，Nutanix 集 群 采用 节点 感知 ， 即 同一 份 数据 和 它 的 一 个 或 
两 个 副本 分 布 在 集群 的 不 同 节点 上 。 而 机 箱 感知 则 是 将 故障 域 扩展 到 整个 机 箱 ， 即 使 整个 机 箱 掉 电 或 机 箱 内 多 个 节点 同时 发 生 故 障 ， 虚 拟 机 数据 仍然 可 用 。 


机 箱 感知 的 机 制 和 节点 感知 类 似 ， 在 RF 为 2 时 ， 如 果 集 群 内 有 3 个 或 以 上 机 箱 ， 则 可 以 允许 1 个 机 箱 故 障 或 机 箱 内 节点 (最 多 4 个 节点 ) 同时 故障 ， 在 RF 为 3 时 ， 如 果 和 集群 内 有 5 个 及 以 上 机 箱 
则 允许 两 个 机 箱 故 障 或 者 机 箱 内 节操 (最 多 8 个 节点 ) 同时 故障 。 需 要 指出 的 是 ， 机 箱 感知 这 个 功能 是 默认 开局 的 ， 满 足 一 定 条 件 就 会 自动 地 按照 机 箱 感知 分 布 数据 ， 而 无 须 人 为 开局 ， 并 且 机 
箱 感 知 的 实现 是 一 种 尽力 而 为 的 方式 ， 对 整个 集群 内 的 节点 分 布 和 容量 分 配 有 一 定 的 要 求 ， 规 划 设 计 细节 请 参考 第 4 章 机 箱 感知 设计 部 分 的 内 容 。 


在 开启 机 箱 感知 后 ， 数 据 、 元 数据 、 集 群 配置 数据 的 放置 将 按照 以 下 的 规模 放置 。 
- 数据 放置 


数据 副本 会 被 写 入 集群 中 的 不 同 机 箱 的 节点 内 ， 以 保证 当 一 个 机 箱 故障 或 者 计划 停机 时 ， 数 据 仍然 可 用 ， 如 图 2-31 所 示 。 
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图 2-31 数据 副本 放置 


Cassandra 利 用 一 个 环形 架构 ， 复 制 到 环 里 n (3 或 5) "peer (伙伴 ) 来 保证 数据 的 一 致 性 和 可 用 性 ， 每 个 peer 对 应 集群 内 的 一 个 节点 。 图 2-32 显 示 了 一 个 有 12 个 节点 集群 的 Cassandra 环 
的 例子 ， 同 一 份 元 数据 复制 了 3 或 5 份 (对 应 RF2 和 RF3) 。 


Cassandra peer 复 制 在 整个 环 里 使 用 顺 时 针 的 方式 传递 到 各 个 节点 。 在 机 箱 感 知 下 ，peer 会 分 布 到 各 机 箱 里 ， 确 保 没 有 两 个 peer 存 在 同一 个 机 箱 中 。 


图 2-33 显 示 了 一 个 节操 感知 布局 ， 按 照 上 述 环形 传递 到 机 箱 感 知 布 局 的 例子 : 节点 1 的 元 数据 会 按照 环 的 顺 时 针 方向 ， 复 制 到 节点 2 和 节点 3 对 应 的 节点 CVM 中 ， 对 于 其 他 节点 的 元 数据 都 按 
照 1 到 12 顺 时 针 环 顺序 进行 更 新 和 同步 。 


在 机 箱 感 知 特性 下 ， 即 使 发 生 整 个 机 箱 模 块 故障 ， 仍 然 有 至 少 两 份 元 数据 副本 (元 数据 RF3， 在 大 型 集群 可 以 为 RF5) 。 
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图 2-33 ”Cassandra 节 点 块 感知 放置 


| 


配置 数据 放置 
Nutanix 利 用 Zookeeper 来 存储 集群 里 必要 的 配置 数据 。 这 些 角色 也 使 用 模块 感知 的 方式 进行 分 布 以 确保 模块 故障 时 仍然 可 用 。 


图 2-34 显 示 了 3 个 Zookeeper 节 点 分 布 在 一 个 机 箱 感 知 的 集群 示例 : 
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Zookeeper 节操 将 按照 机 箱 感 和 万 式 分 布 


图 2-34 Zookeepet 块 感知 放置 


如 果 一 个 机 箱 故 障 ， 意 味 着 丢失 了 一 个 Zookeeper 节 点 ，Zookeeper 的 角色 将 会 被 转移 到 集群 里 的 另外 一 个 节点 上 ， 当 这 个 机 箱 恢复 正常 上 线 后 ，Zookeeper 角 色 将 会 被 转移 ， 以 维持 机 
箱 感 知 。 


2.3.5 ”备份 与 容 灾 技 术 特 性 

Nutanix 提 供 原生 的 备份 和 容 灾 (DR) 功能 ， 实 现 虚拟 机 和 其 他 对 象 的 备份 、 恢 复 和 远程 容 灾 。 
23.5.4 备份 与 容 灾 的 关键 概念 

Nutanix 备 份 和 容 灾 涉及 以 下 关键 概念: 


: 保护 域 (PD/Protection Domain) : 用 来 定义 需要 基于 相同 保护 策略 进行 复制 保护 的 一 组 虚拟 机 或 文件 。 


- 一 致 性 组 (CG/Consistency Group) : 用 来 定义 PD 中 多 个 相关 联 的 虚拟 机 或 文件 构成 的 一 个 子 集 ， 以 实现 故障 一 致 性 。 从 而 确保 在 虚拟 机 或 文件 回 滚 时 的 数据 一 致 性 。 一 个 PD 中 可 包含 多 
个 CG。 


- 快照 计划 (Snapshot Schedule) : 用 来 为 PD 和 CG 中 的 虚拟 机 提供 快照 、 复 制 的 计划 安排 。 
- 保留 策略 (Retention Policy) : 用 来 定义 本 地 或 远程 站 点 中 保留 的 快照 数量 。 
: 远程 站 点 (Remote Site) : 用 来 定义 作为 备份 或 容 灾 的 目标 使 用 的 远程 Nutanix 集 群 (一 般 为 物理 Nutanix 集 群 ) 。 


图 2-35 展 示 了 一 个 站 点 内 ，PD、CG 和 虚拟 机 /文件 间 的 逻辑 关系 。 
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图 2-35 ARAPKA 


Nutanix 不 仅 可 以 保护 整个 存储 容器 (Storage Container) ， 也 可 以 针对 单个 或 多 个 虚拟 机 或 文件 提供 细 粒 度 的 保护 。 


2.3.5.2 ”备份 和 恢复 


Nutanix 备 份 功能 借助 原生 的 DSF 快 照 实现 应 用 数据 的 逻辑 保护 ， 可 用 于 恢复 人 为 误 操 作 或 者 病毒 等 造成 的 数据 错误 。Nutanix 备 份 功能 由 Cerebro 调 用 并 由 stargate 执 行 DSF 快 照 。 这 种 快 
照 只 复制 元 数据 ， 确 保有 效 利用 存储、 降低 开销 。 


典型 备份 和 恢复 操作 包括 : 

TR: 创建 恢复 点 并 复制 (如 果 需 要 的 话 ) o 

TRA: 从 之 前 的 快照 中 恢复 虚拟 机 /文件 ( 蔡 换 原 有 对 象 ) 。 

` 克隆 : 类似 于 恢复 ， 但 不 替换 原 有 对 象 〈 使 用 快照 创建 新 对 象 ) 。 


2.3.5.3 ”数据 复制 和 容 灾 


Nutanix 原 生 的 数据 复制 和 容 灾 功 能 ， 构 建 于 “快照 ”和 “克隆 ”等 功能 之 上 ， 实 现 多 个 Nutanix 物 理 集群 间 的 数据 传输 ， 复 制 的 数据 可 用 于 灾难 恢复 或 其 他 目的 。 相 比 传统 存储 设备 的 容 
灾 功 能 ，Nutanix 原 生 的 数据 复制 和 容 灾 特性 管理 更 加 入 单 ， 颗 粒度 更 细 ， 更 加 灵活 。 


容 灾 复制 网 络 拓 扑 包 括 : 点 对 点 (Site to site) , tef (hub and spoke) ， 全 网 状 /部 分 网 状 (full and/or partial mesh) 。 相 对 于 传统 的 方案 仪 提供 “点 到 点 ”或 “菊花 链 ” 的 方 
式 ，Nutanix 提 供 “ 全 网 状 ”或 更 加 灵活 的 “多 到 多 ”的 拓扑 方式 。 灵 活 的 容 灾 复制 配置 可 以 更 好 地 满足 复杂 的 容 灾 和 需求。 复制 拓扑 结构 实例 如 图 2-36 所 示 。 
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图 2-36 复制 拓扑 结构 实例 
Nutanix 通 过 Cerebro 组 件 实现 数据 的 复制 。 在 复制 过 程 中 ，Cerebro 将 负责 


图 2-37 是 一 个 包含 3 个 站 点 的 容 灾 部 署 示 例 ， 在 每 个 站 点 中 包含 了 多 个 PD。 


两 个 站 点 都 已 存在 的 数据 无 需 
再 传输 ， 只 需要 完成 元 数据 更 新 即 可 


只 有 远程 目标 站 点 不 仓储 的 
数据 才 会 被 压缩 后 传输 ; 
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重复 数据 删除 针对 的 是 整个 
Nutanix 集 群 ， 即 便 该 数据 未 加 入 保护 组 
图 2-37 ” 容 灾 复制 中 的 重复 数据 删除 
分 布 式 人 存储 架构 (DSF) 可 以 仅 通 过 更 新 元 数据 (Metadata) 指针 实现 容 灾 复制 的 重复 数据 删除 。 通 过 网 络 发 送 数 据 之 前 ，DSF 将 检查 远程 站 点 中 是 否 已 经 存在 相关 数据 的 指纹 


(fingerprint) 记录 。 如 果 有 ， 则 不 发 送 数据 而 仪 更 新 元 数据 。 如 果 远 程 站 点 中 没有 此 数据 的 指纹 记录 ， 数 据 将 被 压缩 并 发 送 至 目标 站 点 中 。 此 后 ， 该 数据 即 可 被 用 于 两 个 站 点 中 的 重复 数据 删 
除 操作 。 


2.3.5.4” 城 域 高 可 用 


Nutanix 的 Metro Availability (MA) 功能 允许 计算 和 存储 集群 不 受 物理 站 点 限制 ， 计 算 集群 可 以 跨越 两 个 站 点 并 共享 一 个 存储 池 。 通 过 MA 功能 ， 虚 拟 机 高 可 用 集群 从 一 个 站 点 扩展 到 两 


个 站 点 ， 从 而 大 大 降低 站 点 (或 者 集群 ) 故障 恢复 时 间 (RTO) ， 提 升 了 IT 系统 整体 可 用 性 。 


在 MA 部 署 架构 下 ， 每 个 站 点 都 有 自己 的 Nutanix 集 群 ， 但 其 中 的 存储 容器 的 写 操作 被 同步 复制 到 远 端的 站 点 之 中 。 图 2-38 是 此 架构 的 详细 示意 图 。 


虚拟 化 集群 跨 两 个 站 点 构建 HA 保护 城 
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\ | 
每 个 站 点 都 有 独立 的 Nutani 集群 ， 每 个 站 点 都 有 男 一 站 点 非 活动 数据 原 存储 区 ， 
并 支持 所 有 的 数据 服务 功能 当 故 障 友 生 时 ， 访 区域 会 切换 为 活动 数据 存储 区 


图 2-38 ” 城 域 高 可 用 性 -正常 状态 
当 站 点 发 生 故障 ， 虚 拟 机 将 发 生 HA 切 换 ， 虚 拟 机 在 另 一 个 站 点 启动 。 图 2-39 是 一 个 站 点 发 生 故障 的 示意 图 。 
如 果 站 点 间 的 网 络 链 路 发 生 故障 ， 集 群 将 分 别 独 立 运行 。 网 络 链 路 修复 后 ， 站 点 间 将 进行 数据 的 增 量 同步 ， 重 新 恢复 数据 复制 。 
2.3.5.5 Zi 


云 连接 (Cloud Connect) 功能 可 以 将 Nutanix 集 群 中 的 虚拟 机 备份 到 公有 云 环境 中 。 类 似 于 前 述 章节 中 介绍 的 数据 复制 和 容 灾 功能 ， 但 是 远程 站 点 实际 上 是 一 个 “公有 云集 群 ”。 当 创建 
远程 站 点 时 ，Nutanix 将 自动 使 用 AWS 的 EC2 (当前 为 m1.xlarge 类 型 ) 或 微软 的 Azure 虚 拟 机 (当前 为 D3 类 型 ) 在 云端 创建 一 个 单 节点 集群 作为 目标 站 点 。 


运行 在 AWS 上 的 云 实 例 也 是 基于 与 物理 集群 相同 的 AOS 源 代码 构建 的 。 因 此 所 有 原生 的 复制 功能 (例如 : 全 局 重复 数据 删除 ) 可 以 直接 使 用 。 


当 站 点 1 友 生 故障 时 候 ， 将 触发 HA， 所 有 被 保护 的 虚拟 机 将 在 站 点 2 重新 启动 
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当 一 个 站 点 故障 时 会 ， 站 点 间 的 复制 将 被 中 断 ， 只 保留 WA 1 故障 友 生 后 ， 被 保护 的 DataStore 将 在 站 后 2 上 被 切换 
本 地 RF 机 制 ， 当 站 点 恢复 后 ， 复 制 流程 将 恢复 正常 为 活动 状态 ， 所 有 的 VO 操作 将 由 站 点 2 的 Nutanix 集群 接管 


图 2-39” 城 域 高 可 用 性 -站 点 故障 


由 于 基于 AWS 创 建 的 站 点 类 似 于 Nutanix 的 普通 远程 站 点 ,集群 可 将 数据 复制 到 多 个 不 同 公 有 云 区 域 (Region) ， 从 而 获得 更 高 的 业务 连续 性 (例如 ， 地 域 性 的 灾害 导致 数据 中 心 故障 ， 


仍 可 保证 数据 可 用 ) 。 图 2-40 是 多 个 Nutanix 集 群 与 两 个 公有 云 区 域 之 间 的 连接 示意 图 。 
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集群 B 集群 
Nutanix 集 群 可 以 复制 到 多 个 公有 云 区 域 ， 已 获得 更 大 的 可 用 域 


图 2-40 ” 云 连 接 备 份 示 意图 


2.3.6 面向 应 用 的 扩展 服务 


2.3.6.1 块 服务 


块 服务 (Acropolis Block Services, ABS) 功能 使 用 iSCSI 协 议 将 集群 的 分 布 式 存储 提供 给 外 部 的 使 用 者 (虚拟 机 、 物 理 服务 器 、 容 器 等 ) 。ABS 类 似 于 传统 NAS 设 备 提供 的 iSCSI 服 务 ,与 
传统 架构 不 同 的 是 使 用 ABS 的 物理 服务 器 或 虚拟 机 能 够 获得 更 高 的 可 用 性 和 易于 扩展 的 高 性 能 。 


ABS 包 合 以 下 关键 概念 : 

: 数据 服务 IP (Data Services IP) : iSCSI 登 录 请 求 时 使 用 的 集群 IP 地 址 。 

- 442 (Volume Group) : iSCSI tatget 和 磁 瘟 组 ， 在 集中 管理 、 快 照 和 策略 申请 时 使 用 。 
- 磁盘 (Disk) : 添加 在 Volume Group 中 的 磁盘 设备 。 


数据 服务 1P 可 以 确保 iSCSI 客户 端 在 不 需要 私有 CVM IP 地 址 的 情况 下 进行 iSCSI 的 发 现 操作 。iSCSI 协 议 在 每 个 Initiator 和 target 之 间 设 置 一 个 单独 的 iSCSI 会 话 (TCP 链 接 ) ， 保 证 每 个 ABS 
磁盘 设备 都 有 一 个 自己 的 iSCSI 会 话 ， 并 且 这 些 会 话 能 够 在 多 个 Stargate 之 间 调 度 ， 增 加 可 扩展 性 并 提高 性 能 。 同 时 ，ABSs 也 借 此 提供 负载 均衡 功能 实现 了 集群 资源 的 平衡 使 用 ， 如 图 2-41 所 


个 \。 


配置 了 数据 服务 IP 的 i9Csl Initiator 会 作为 SCSI target 入 口 ， 当 有 iSCSI 登 录 请 求 时 ，ABS 将 iSCSI 登 录 重 定向 到 一 个 健康 的 Stargate， 如 图 2-42 所 示 。 
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图 2-41 Block Services- 4 #44 


图 2-42 iSCSI 故障 转移 


当 活 动 的 Stargate 故 障 时 ，lnitiator 会 党 试 让 iSCSI 重新 登录 到 数据 服务 |P。 数 据 服 务 IP 将 登录 重 定向 到 另 一 个 健康 的 Stargate。 当 出 现 问题 的 首选 stargate 恢 复 正 常 且 保持 可 用 时 ， 当 前 活 
动 的 Stargate 将 静默 |/O 并 结束 活动 的 1SCSI 会 话 。 在 Initiator 重 新 尝试 进行 ISCSI 登 录 时 ， 数 据 服务 IP 将 登录 重 定向 到 已 经 恢复 正常 的 首选 Stargate。 


2.3.6.2 ”文件 服务 


文件 服务 (Acropolis File Services, AFS) 功能 基于 Nutanix 平 台 实现 了 一 个 分 布 式 、 高 可 用 的 文件 共享 服务 器 。 用 户 可 以 在 单一 命名 空间 中 存储 主 目录 和 文件 。AFS 与 用 户 虚 拟 机 运行 于 
同一 Nutanix 基 础 架构 ， 因 此 无 须 专用 的 文件 存储 系统 ， 从 而 降低 成 本 ， 同 时 提高 了 业务 灵活 性 。 管 理 员 可 以 使 用 Prism 部 署 并 管理 AFS。 此 外 ，AFS 可 支持 用 户 配额 、 快 照 、 备 份 和 DR 这 些 关 
键 系统 所 需 的 特性 。 


AFS 包 含 以 下 关键 概念 : 
- 文件 服务 器 (File Server) : 每 个 文件 服务 拥有 自己 的 一 组 文件 服务 虚拟 机 (File Services VM, FSVM) ào 
- 共享 (Share) : 开放 给 用 户 的 共享 。 一 个 文件 服务 器 可 以 拥有 多 个 共享 (例如 部 门 级 共享 等 ) 。 


| 文件 夹 (Folder) : 存储 文件 的 文件 夹 。 文 件 夹 在 文件 服务 虚拟 机 间 共 享 。 


2-43 是 这 些 概念 之 间 的 映射 关系 : 


文件 服务 功能 遵循 与 Nutanix 平 台 相 同 的 分 布 式 设计 ， 确 保 可 用 性 和 扩展 性 。 
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图 2-43 ”文件 服务 关系 映射 


在 正常 工作 环境 中 ， 每 个 FSVM 都 会 与 自己 的 数据 存储 通信 ， 并 保持 到 其 他 数据 存储 的 备用 连接 。 作 为 Windows 分 布 式 文件 系统 (NDFS/Nutanix Distributed File System) 的 一 部 分 ,每 
个 文件 服务 虚拟 机 都 有 一 个 供 客户 端 与 自身 通信 的 IP。 但 是 客户 端 不 需要 知道 每 个 独立 的 [SVM 的 IP， 因 为 NDFS 引 用 (referral) 过 程 会 将 客户 端 连接 到 驻 留 文件 夹 的 相关 IP。 


FSVM 借 助 Acropolis Volunmes API 使 用 in-guest iSCSI 来 访问 自己 的 数据 存储 。 当 FSVM 宕 机 时 ， 任 意 FSVM 可 以 取代 故障 FSVM 连 接 相 应 1SCSI target 提 供 服务 。 

当 FSVM “故障 ” (例如 人 工 维护 、 断 电 等 ) 时 ， 故 障 FSVM 的 数据 存储 和 IP 都 会 被 另 一 个 FSVM 接 管 ， 确 保 文件 服务 的 可 用 性 。 

AFS 支 持 一 键 式 扩展 文件 服务 ， 管 理 员 通过 简单 操作 即 可 扩展 FSVM。 同 时 ，AFS 后 台 也 会 监控 性 能 热点 ， 如 果 检测 到 性 能 热点 ，AFS 将 提醒 管理 员 采 取 以 下 三 种 操作 之 一 : 
1. 在 现 有 FSVM 之 间 平 衡 工作 负载 。 

2. 添 加 其 他 FSVM 并 将 现 有 负载 移动 到 这 些 新 FSVM。 


3. 扩 大 现 有 FSVM 的 资源 。 


2.3.6.3 ”容器 服务 


容器 服务 (Acropolis Container Services, ACS) 在 Nutanix 平 台 上 提供 了 对 Docker 容 器 (Container) 的 支持 。ACS 简 化 了 在 Nutanix 平 台 使 用 Docker 容 器 的 步 又 ， 而 且 为 Docker 管 理 
的 容器 提供 持久 化 存储 能 力 。 之 前 虽然 也 可 以 在 Nutanix 平 台 上 运行 Docker， 但 是 无 法 提供 持久 化 的 数据 人 存储 。Docker 在 Nutanix 上 运行 的 示意 图 如 图 2-44 所 示 。 


Docker 容 器 技术 不 同 于 虚拟 化 技术 。 在 传统 的 虚拟 化 环境 中 ， 虚 拟 机 都 有 上 自己 的 操作 系统 (OS) ， 但 是 共享 底层 的 硬件 。 而 容器 共享 的 是 底层 的 操作 系统 内 核 ， 容 器 中 运行 的 应 用 都 独立 
运行 在 各 自 的 进程 中 。 
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图 2-44 ”集群 支持 Docker 容 器 示意 


ACS 通 过 Docker Machine Driver 在 Nutanix 集 群 上 创建 Docker 主 机 (Docker 主 机 以 虚拟 机 的 形式 存在 于 Nutanix 集 群 ) ， 构 建 和 运行 基于 容器 的 有 状态 应 用 程序 。 为 软件 开发 提供 了 转向 
DevOps 的 支撑 能 力 。 同 时 ，Nutanix Docker Volume Driver 作 为 Docker 卷 扩展 运行 ， 将 Docker 存 储 需 求 匹配 到 Nutanix iSCSI 卷 组 。 为 Docker 环 境 带 来 了 Acropolis DSF 提 供 的 企业 级 存储 


ACS 包 含 以 下 关键 概念 : 
: Nutanix Docker 主 机 镜像 (Nutanix Docker Host Image) : Nutanix 在 支持 门户 中 提供 了 预 配置 和 验证 过 的 Docket 主 机 镜像 。 该 镜像 被 Docker Machine 使 用 来 构建 Docker 主 机 。 


: Nutanix Docker Machine 了 驱动 (Nutanix Docker Machine Driver) : 通过 Docker Machine 和 Actopolis 镜 像 服 务 控制 Docket 的 容器 主机 发 布 。 


: Nutanix Docker 卷 驱动 (Nutanix Docker Volume Driver) : 当 Acropolis Block Services 创 建 、 挂 载 、 格 式 化 和 附加 卷 到 所 需 的 容器 时 作为 驱动 接口 。 
Nutanix 当 前 支持 将 Docker Engine 运 行 在 为 使 用 Docker 创 建 出 来 的 普通 虚拟 机 中 ， 如 图 2-45 所 示 。 


此 外 ，ABS 也 可 以 为 Docker 容 器 提供 持久 化 存储 卷 。 如 图 2-46 所 示 。 这 些 卷 可 以 保证 容器 在 关机 或 移动 时 数据 持久 不 变 。 
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Nutanix Next 社 区 (Next Community) 是 了 解 Nutanix 超 融合 平台 最 为 便捷 和 实用 的 途径 ， 你 可 以 直接 访问 Next 社 区 网 站 (http://next.nutanix.com/) ， 完 成 Next 社 区 用 户 注册 后 ， 
便 可 以 在 Next 社 区 中 获取 Nutanix 社 区 版 相关 资料 ， 下 载 Nutanix 社 区 版 系统 安装 介质 ， 并 在 Nutanix 社 区 版 系统 所 建议 的 兼容 硬件 环境 中 安 半 部 署 ， 以 用 于 配置 和 操作 练习 。 


本 章 内 容 是 后 续 章节 的 预备 知识 ， 通 过 学 习 本 章 ， 你 可 以 学 会 在 桌面 级 环境 中 搭建 Nutanix 超 融合 系统 ， 并 完成 Nutanix 超 融合 系统 基本 功能 的 学 习 以 及 常见 问题 的 排 错 等 。 


3.1 Nutanix Next 社 区 介绍 


Nutanix Next 社 区 是 由 Nutanix 开 通 并 负责 维护 的 在 线 开 放 社 区 ， 旨 在 为 超 融 合 技 术 爱 好 者 提供 一 个 学 习 、 交 流 以 及 提升 技术 能 力 的 平台 。 


通过 Nutanix Next 社 区 ， 你 可 以 获得 免费 下 载 的 Nutanix 社 区 版 ， 并 能 通过 社区 的 讨论 区 或 Blog 获 得 最 新 的 技术 更 新 和 技术 支持 。 


3.1.1 ”Nutanix 社 区 版 介绍 


Nutanix 社 区 版 (Community Edition， 以 下 简称 CE) 是 Nutanix 面 向 技术 爱好 者 提供 的 免费 下 载 和 安装 的 Nutanix AOS (Acropolis OS) ， 可 以 帮助 你 快速 搭建 Nutanix 企 业 云 平台 。 关 
于 Nutanix CE 所 包含 的 模块 信息 和 操作 方式 详 见 表 3-1。 


表 3-1 Nutanix 社 区 版 介绍 


项 目 名 称 说 HH 


Nutanix 社区 版 Nutanix Acropolis OS Community Edition 

虚拟 化 系统 Nutanix AHV (Acropolis HyperVisor) 虚拟 化 系统 

集群 管理 系统 Nutanix Prism 集群 管理 控制 台 

多 集群 管理 系统 Nutanix Prism Central 

命令 行 工 具 Nutanix CLI (Nutanix Command-Line Interface) 命令 行 接口 
集群 规模 MEF 1 个 、3 个 或 4 个 节点 组 成 一 个 集群 

RITI 通过 USB 设备 安装 和 引导 Nutanix AHV 和 AOS 环境 


在 介绍 完 Nutanix 社 区 版 之 后 ， 接 下 来 我 们 介绍 如 何 获得 Nutanix 社 区 版 相关 的 技术 资讯 与 最 新 版 本 的 下 载 地 址 。 除 前 面 提 到 的 Nutanix Next 社 区 之 外 ， 也 可 访问 如 下 网 站 找到 Nutanix 社 
区 版 及 其 他 产品 的 官方 文档 : 


https://www.nutanix.com/products/community-edition/ 
https://portal.nutanix.com/#/page/docs 
Nutanix 社 区 版 对 硬件 有 性 能 和 兼容 性 要 求 ， 基 于 Nutanix 官 方 提供 的 测试 数据 ， 表 3-2 列 出 了 Nutanix 社 区 版 所 需 的 最 低 系 统 要 求 。 


表 3-2 Nutanix 社 区 版 所 需 的 最 低 系 统 要 求 


项 目 名 称 配置 说 明 
Kh Fae (CPU) Intel CPU, 最低 4 个 物理 核心 ， 须 支持 VT-x 技术 
内 存 (Memory) 最 低 16GB 
Tris AC At LSI 控制 器 (HBA, JBOD 2% RAID 0 模式 ) Bk AHCI 存储 
热 数 据 层 (SSD) 最 小 单 块 200GB 固态 磁盘 
冷 数据 层 (HDD) 最 小 单 块 500GB 机 械 磁盘 
网 络 建议 采用 Intel 网 卡 
启动 设备 最 小 8GB， 支 持 USB3.0 的 设备 


Os 1. 安 装 硬盘 时 ， 需 要 将 固态 硬盘 放置 在 机 械 磁 盘 之 前 的 通道 。 

2.Nutanix 社 区 版 2016.12.22 之 后 的 版 本 支持 基于 NVMe 协 议 的 驱动 器 。 

3. 安 装 及 运行 Nutanix 社 区 版 期 间 ， 请 不 要 移 除 USB 启 动 设备 。 

4. 安 装 Nutanix 社 区 版 之 前 ， 建 议 将 硬件 设备 的 国 件 升级 到 最 新 版 本 或 厂商 所 建议 的 稳定 版 本 。 

除 上 述 最 低 的 系统 要 求 之 外 ，Nutanix 官 方 也 推荐 了 表 3-3 中 所 列举 的 几 款 常 见 的 服务 器 作为 Nutanix 社 区 版 所 兼容 的 设备 型 号 。 


表 3-3 Nutanix 社 区 版 兼容 设备 示例 


项 目 名 称 配置 说 明 
Cisco UCS C220 M3 
CPU: Intel Xeon E5-2609v2 2.5GHz 
RAM: 24GB DDR3 
SSD: Cisco Enterprise Value SSD-240 GB 
HDD: Cisco-500 GB-2.5" SFF-SATA 6Gb/s-7200 rpm 
NIC: Broadcom NetXtreme II 5709 


Dell PowerEdge R220 

CPU: Intel Xeon E3-1220v3 3.1 GHz 

RAM: 32GB DDR3 

SSD: Kingston SSDNow E50-480GB 

HDD: 7.2k RPM SATA 3Gbps 2.5in-1TB 

NIC: On-Board LOM 1GBE (LAN on Motherboard) 


HP ProLiant DL320e Gen8 v2 

CPU: Intel Xeon E3-1220v3 3.1 GHz 

RAM: 32GB DDR3 

SSD: Kingston SSDNow E50-SSD-240 GB 

HDD: HP Midline HDD-500 GB-SATA 6Gb/s-7200 rpm 
NIC: HP Ethernet 1Gb 2-port NC3321 Adapter 


SuperMicro SuperServer 1018D-73M TF 

CPU: Intel Xeon E3-1220v3 3.1 GHz 

RAM: 32GB DDR3 

SSD: Seagate Pulsar.2 Enterprise SAS SSD-200GB 

HDD: Seagate Constellation.2 SATA 6Gb/s 7.2K RPM 64M-500GB 
NIC: Intel I210AT-Dual Gigabit Ethernet LAN 


Cisco 


Dell 


HPE 


SuperMicro 


Qz 你 也 可 以 访问 Nutanix Next 社 区 ， 提 交 你 的 硬件 配置 ， 社 区 管理 员 会 帮助 你 核实 硬件 配置 与 Nutanix 社 区 版 的 兼容 性 。 


3.1.2 Nutanix Next 仁 区 注册 步骤 


如 果 是 初次 接触 Nutanix 社 区 版 ， 下 载 及 运行 它 之 前 需要 注册 为 Nutanix Next 社 区 用 户 。 下 面 的 内 容 将 帮助 你 了 解 注册 流程 。 

Nutanix Next 社 区 虽然 为 注册 制 ， 但 未 注册 用 户 仍 可 以 浏览 、 查 询 信息 和 阅读 帮 帖 。 不 过 ，Nutanix 建 议 成 为 注册 用 户 ， 以 便 获 得 社区 如 下 全 部 权限 : 
浏览、 查询 及 阅读 发 帖 或 主题 

:发布 新 帖 ， 回 复 其 他 成 员 的 发 由 

. 对 感 兴趣 的 发 帖 或 主题 设置 “回复 提醒 邮件 ” 

` 成 员 间 发 送 “ 私 信 ” 

访问 的 偏好 设置 

评论 “不 允许 匿名 用 户 回复 ”的 主题 

` 发 布 、 评 论 主题 及 对 其 投票 

接 下 来 将 一 步 步 指 导 你 完成 Nutanix Next 社 区 用 户 的 注册 ， 该 操作 过 程 是 写作 本 书 时 Nutanix 官 方 的 注册 流程 ， 在 实际 注册 过 程 中 可 能 会 有 变动 ， 请 以 Nutanix 官 方 注册 流程 为 准 。 
访问 链接 http://next.nutanix.com/， 打 开 Nutanix Next 社 区 页 面 之 后 ， 只 需 一 分 钟 左右 就 可 以 完成 社区 注册 。 详 细 流 程 如 下 : 


1) 点 击 社 区 首页 右上 角 “Sign In”， 等 待 页 面 跳 转 到 my.nutanix.com 单 点 登录 页 面 ， 如 图 3-1 所 示 。 


NUTAND< 


N E > >< T Discussions Blogs 


Get Started í 


Nutanix NEXT D wu get started plea% re short welcome post./ 
a" 


Search all content 


IE 


Latest Solutions Active Discussions 
Topic Author LatestPost Kudos Replies Discussion Boards 
Genesis Status output for a failed or down service yesterday 0 3 > All About Community 
Migrate VM from VMware ESXi to (AHV) - NFS mount May 12, 0 7 > Download Prism Central © 
problem 2017 


CO) All About Nutanix € 


Monitoring Nutanix with check mk (OMD) [x] Mar 7, 2017 1 8 

CO) Workloads & Applications 
It's possible to assign a name to a disk in a volume 
group? n 回 a week ago 0 3 CO) Developer Center 


图 3-1  Nutanix Next 社 区 首页 


2) 在 Nutanix 单 点 登录 页 面 ， 点 击 “+Create account" ， 如 图 3-2 所 示 。 


NU TANI. 


Welcome to my.nutanix.com, the single sign-on portal for accessing all major 
Nutanix web properties! 


* Create account Forgot password? 


图 3-2 ”Nutanix 单 点 登录 页 面 


3) BREVE RAS RA, HARP A. Piva es, muh “Register” , 20K13-3Fim. 


NUTANIX. 


By signing up, you acknowledge that you have reviewed and that you agree to be 
bound by the terms of the Global Nutanix, Inc, Export Compliance Assurance and 
the End User License Agreement on behalf of yourself and your company. 


Minimum & Characters 

Uppercase 

Lowercase 

Special character $i £258 
Register 


Return to sign in 


图 3-3 ”Nutanix 账 户 新 建 用 户 窗口 


Q 1. 所 填写 的 用 户 名 ， 可 以 在 注册 成 功 之 后 修改 。 

2. 邮 箱 地 址 应 为 企业 邮箱 地 址 ， 通 用 邮箱 地 址 可 能 被 提示 “Unauthotized email domain” o 
3. 密 码 规格 需要 满足 如 下 规则 : 

(EGER 

必须 包含 大 小 写字 母 ; 

- 包含 特殊 字符 ， 如 $1 (HER. 


4) 如 填写 信息 正确 ， 系 统 会 提示 注册 成 功 ， 并 向 所 填写 的 企业 邮箱 发 送 注册 激活 邮件 ， 如 图 3-4 所 示 。 


NU TANI. 


By signing up, you acknowledge that you have reviewed and that you agree to be 
bound by the terms of the Global Mutanix, Inc, Export Compliance Assurance and 
the End User License Agreement on behalf of yourself and your company. 


SUCCESS! 


Return to sign in 


[3-4 ”Nutanix 账 户 注 册 成 功 窗口 
5) 登录 所 填写 的 企业 邮箱 ， 按 照 提示 完成 账户 注册 。 
Qi 如 邮箱 收 件 箱 中 无 激活 邮件 ， 请 检查 一 下 “垃圾 邮件 ”文件 来 。 
6) 激活 成 功 之 后 ， 便 可 以 回 到 Nutanix Next 社 区 主页 ， 使 用 你 所 注册 的 账户 信息 登录 。 
G..-— 如 忘记 用 户 名 或 登录 密码 ， 可 在 Nutanix 单 点 登录 页 面 点 击 “Forgot password? ”， 并 按照 提示 操作 ， 则 系统 会 发 送 一 封包 含 用 户 名 及 重 设 密码 的 邮件 到 企业 邮箱 。 


7) 成 功 登 录 my.nutanix.com 之 后 ， 页 面 跳 转 到 Nutanix 单 点 登录 账户 首页 ， 点 击 “Community Edition” ， 等 竺 页面 跳 转 ， 如 图 3-5 所 示 。 


Welcome back, 


These are the Nutanix services that are currently active for your account. You can activate a 
new service by clicking on it and following the steps on your screen. 


Next 
e 


Engage with Nutanix community via Blogs, Activities & Forums 


Community Edition 


Forum for all things NOS Community Edition 


| Support Portal 
e pp 


Open/View Cases, KB, SW downloads, Docs, Installed Base & Licenses 


e Deal Registration Portal 
Submit Deal Registrations 


Partner Portal 
e Training, marketing assets, campaigns, analyst reports, competitive 
knowledge and more. 


& Nutanix Education Portal 
Take MuSchool Technical Training and Get Certified 


图 3-5 “Nutanix 单 点 登录 账户 首页 


8) 页 面 跳 转 到 “Community Edition” 评 估 申 请 的 信息 填写 页 面 ， 更 新 个 人 信息 ， 如 职位 名 称 (Job Title) 、 电 话 号 码 (Phone Number) 、 公 司 名 称 (Company Name) 以 及 所 在 国 
家 (Country) ， 完 成 后 点 击 “Submit” ， 如 图 3-6 所 示 。 


9) 如 所 填 信息 无 误 ， 页 面 自动 跳 转 ， 并 提示 注册 成 功 ， 如 图 3-7 所 示 。 


10) 重新 登录 my.nutanix.com 成 功 后 ， 发 现 “Community Edition” 访 问 权限 开通 ， 如 图 3-8 所 示 。 


Register Now to Get Immediate Access to Community 
Edition 


By signing up today you will: 


v] Get access to Community Edition 
Job Title * 


© Join the premier hyperconvergence community 


© Get unfettered access to the latest product news | 
| Phone Number * 


After signing up, please check your email spam folder if you have trouble finding your access directions. | Company Name * 
Country * vi 


| Invite Code (optional) 


图 3-6 ”Nutanix 社 区 版 评估 申请 信息 表 
Thanks for registering for Community Edition. We are very excited to have you join our community! 
Check your inbox shortly for directions on how to access your Community Edition license. 


In the meantime. if you want to learn more about Nutanix join our NEXT community forum, read about how our product 
works, or contact a product specialist for a demo. 


图 3-7 Nutanix 社 区 版 评估 申请 成 功 提 示 页 面 


Welcome back, ~ 


These are the Nutanix services that are currently active for your account. You can activate a 
new service by clicking on it and following the steps on your screen. 


Next 
e 


Engage with Nutanix community via Blogs, Activities & Forums 


Community Edition 


Forum for all things NOS Community Edition 


Support Portal 
2 pp 


Open/View Cases, KB, SW downloads, Docs, Installed Base & Licenses 


e Deal Registration Portal 
Submit Deal Registrations 


| Partner Portal 
ae Training, marketing assets, campaigns, analyst reports, competitive 
knowledge and mare. 


a Nutanix Education Portal 
Take NuSchool Technical Training and Get Certified 


图 3-8 Nutanix 单 点 登录 账户 首页 


11) & "Community Edition” 进 入 Nutanix Next 社 区 ,设置 社区 用 户 名 ， 扣 击 “Submit” 提 交 ， 如 图 3-9 所 示 ， 页 面 自动 跳 转 至 Nutanix 社 区 版 首页 。 


Get Started 


Welcome to the Nutanix NEXT community. To get started please read our short 
welcome post. Thanks! 


Search all content 


Nutanix Community > Complete your Profile 


It takes just a minute to register with the community. 


Your username must be at least two characters long. You can use 
letters, numbers, dashes, and underscores. 


图 3-9 Nutanix Next#t [X Jf] P /£ iX 


c 所 填写 的 发 帖 或 发 送 私信 时 所 显示 的 名 字 ， 一 旦 创建 成 功 ， 则 不 可 修改 用 户 名 。 
12) 进入 Nutanix 社 区 版 首页 后 ， 即 完成 全 部 注册 流程 ， 可 以 使 用 社区 内 的 全 部 资源 ， 并 与 社区 中 其 他 成 员 进 行 交 流 互动 ， 如 图 3-10 所 示 。 


NUTAND< 


NE da Discussions Blogs Help 
^. 


Nutanix Community Edition 


Your Source for All- Things Nutanix CE 


Search all content 


Nutanix Community ^  Nutanix Community Edition 


Nutanix Community Edition Discussion Boards 


Discussion Forum 9320 06-14-2017 CÓ) All About Community © 
POSTS 04:13 AM 


CÓ Nutanix Community Edition @ 


Community Edition Blog " kiasi CO) Download Prism Central @ 
POSTS 05:16 AM 


CO) All About Nutanix © 


13 01-13-2017 
CE Knowledge Base CO) Workloads & Applications © 
POSTS 06:47 AM 


CO) Developer Center > 
CO Events © 


CO) Education £X 


图 3-10 登录 成 功 后 的 Nutanix 社 区 版 首页 


至 此 ， 你 已 经 完成 了 Nutanix Next 社 区 的 注册 ， 以 及 Nutanix 社 区 版 评估 申请 ， 后 面 三 节 将 重点 讲述 Nutanix 社 区 版 的 安装 及 操作 。 


3.2 Intel NUC 介 绍 


Intel NUC 是 一 款 功能 强大 的 微型 个 人 电脑 ， 适 用 于 个 人 娱乐 、 游 戏 及 工作 场景 ，Intel NUC 采 用 可 自 定义 的 主板 ， 可 按照 使 用 场景 和 需求 对 内 存 、 磁 盘 等 组 件 进行 自主 选 配 。 


XE TA 


根据 Nutanix Next 社 区 查询 信息 ，Nutanix 社 区 版 可 以 完美 兼容 Intel NUC， 如 图 3-11 所 示 。 


Intel NUCHI7KYKA Eni 


图 3-11 Intel NUC 产 品 图 
本 章 中 Nutanix 社 区 版 的 安装 和 操作 就 是 基于 Intel NUC 进 行 的 ， 可 以 根据 自身 实际 情况 ， 选 择 具体 的 型 号 及 硬件 配置 以 搭建 试验 环境 ， 表 3-4 列 出 了 笔者 的 Intel NUC 硬 件 配置 。 


表 3-4 Intel NUC6I7KYK 配 置 


项 H 说 — BB 

处 理 需 Intel Core i7-6770HQ 处 理 器 (6M Cache， 主 频 高 达 3.50GHz) 

内 存 32GB DDR4-2133+ 1.2V, 1.35V SO-DIMM 

WEE 2 # Crucial CT525MX3 525GB SSD 

网 络 Intel 1GbE 

USB 接口 前 面板 : 2x USB3.0。 后 面板 : 2x USB 3.0。 内 部 : 2x USB 3.0 和 2x USB3.0 
UE SanDisk 32GB 


33 Nutanix 社 区 版 安装 


在 深入 Nutanix 社 区 版 安装 和 配置 之 前 ， 建 议 参照 3.1 节 中 所 提 到 的 硬件 性 能 和 兼容 性 要 求 ， 检 查 安 装 环境 中 硬件 的 配置 ， 以 满足 Nutanix 社 区 版 的 系统 性 能 和 兼容 性 要 求 。 本 书 中 Nutanix 
社区 版 安装 及 操作 都 是 基于 3.2 节 中 所 描述 的 Intel NUC 完 成 的 。 

也 可 以 使 用 虚拟 化 环境 进行 谋 套 式 部 署 ， 详 细 步 又 可 以 访问 如 下 链接 获取 : 

https://www.nutanix.com/2015/08/03/6-nested-virtualization-resources-to-get-you-started-with-community-edition/ 


硬件 配置 检查 无 误 之 后 ， 还 需要 了 解 表 3-5 中 所 列 的 几 点 建议 ， 以 便 顺 利 完成 下 面 的 操作 。 


表 3-5 Nutanix 社 区 版 安装 建议 


In H 建 议 

Nutanix 社区 版 支持 安装 单 节 点 集群 、 三 节点 集群 和 四 节点 集群 。 建 议 根据 人 硬件 资 
源 情况 部 署 三 节点 集群 ， 从 而 获得 最 完整 的 使 用 体验 

如 环境 中 已 部 署 DHCP Ika at, iit Nutanix AHV 主机 及 CVM 使 用 静态 IP 地 
址 ，Nutanix 不 建议 主机 或 CVM 使 用 动态 IP 地 址 

Linux: 使 用 dd 命令 
制作 软件 镜像 Mac OS X: 使 用 dd 命令 

Windows: 使 用 免费 工具 PassMark ImageUSB 或 Rufus 


集群 规模 


DHCP 服务 器 


为 了 使 用 户 获得 更 好 的 使 用 体验 ， 并 能 持续 优化 Nutanix 社 区 版 ， 客 户 在 安装 和 使 用 Nutanix 社 区 版 时 需 接受 如 表 3-6 所 示 的 License 协 议 ， 一 旦 无 法 满足 下 表 所 列 条 款 ，Nutanix 社 区 版 集群 


将 无 法 正常 访问 ， 但 集群 仍 正常 运行 ， 只 是 无 法 登录 。 另 外 ，Nutanix 社 区 版 不 需要 认证 Nutanix 商 业 版 本 的 产品 所 要 求 的 License 文 件 。 
表 3-6 Nutanix 社 区 版 安装 建议 
eae X 执行 动作 

第 一 次 使 用 初始 密码 以 admin 账号 登录 Prism 控制 台 时 ， 必 须 修 改 admin IK 
+ AE 

输入 Nutanix Next 社区 账号 认 | 完成 初次 登录 Prism 控制 台 并 修改 admin 账号 密码 后 ， 将 被 提醒 输入 Nutanix 
证 凭证 ， 以 激活 Nutanix 社区 版 | 社区 账号 认证 凭证 

名 为 “Pulse” 的 目 动 反馈 机 制 会 目 动 将 集群 告警 和 使 用 状态 信息 发 送 到 
Nutanix, i Nutanix 社区 版 环境 需要 链接 到 Internet FF FFA Bi ii TCP 80 或 
8443 输出 端口 

Nutanix 官方 会 经 和 发 布 社区 版 的 更 新 包 ， 当 一 个 更 新 包 可 用 时 ， 应 及 时 下 

及 时 安装 最 新 的 Nutanix 社区 | 载 ， 并 在 30 个 自然 日 内 完成 升级 操作 。Nnutanix 建议 完成 更 新 包 下 载 之 后 立即 
版 更 新 包 执行 安 闻 操 作 。 一 旦 无 法 满足 上 述 所 列 要求 ，Nutanix 社区 版 集群 将 无 法 正常 

访问 ， 但 集群 仍 正常 运行 


修改 admin 账户 的 初始 密码 


开启 防火 墙 的 TCP 80 BK 8443 
输出 交口 


3.3.1 ”下载 及 制作 镜像 盘 


通过 前 面 章节 的 介绍 ， 相 信 大 家 对 Nutanix Next 社 区 及 Nutanix 社 区 版 已 经 有 了 一 个 大 致 了 解 。 可 以 说 Nutanix 社 区 版 是 了 解 超 融 合 系统 最 佳 的 入 门 工具 ， 与 其 他 超 融合 系统 相 
比 ，Nutanix 社 区 版 十 分 容易 上 手 ， 本 书后 续 章 节 中 将 讲解 Nutanix 社 区 版 的 镜像 下 载 、 镜 像 制 作 、 安 装 和 日 常 操作 ， 让 读者 能 够 快速 地 对 Nutanix 社 区 版 有 一 个 基础 性 的 了 解 ， 并 能 自己 动手 构 
建 Nutanix 超 融合 系统 环境 


在 下 载 Nutanix 社 区 版 之 前 ， 要 有 Nutanix Next 社 区 账户 ， 并 申请 Nutanix 社 区 版 评估 权限 ， 如 仍 未 注册 Nutanix Next 社 区 账户 ， 请 参考 3.1 节 完成 账户 注册 及 Nutanix 社 区 版 评估 申请 。 


如 已 完成 账户 注册 ， 并 完成 Nutanix 社 区 版 评估 申请 ， 可 以 在 Next 社 区 的 “Nutanix Community Edition——Discussion Forum——Download Nutanix CE, Docs, and Guides” 页 面 
找到 下 载 链接 以 及 部 署 指南 。 当 然 也 可 以 直接 访问 如 下 地 址 : 


http://next.nutanix.com/t5/Discussion-Forum/Download-Software/m-p/3188#U3188 
输入 Nutanix Next 社 区 账号 认证 赁 证 之 后 ， 即 可 打开 下 载 页 面 。 
在 写作 本 书 时 ，Nutanix 社 区 版 最 新 版 本 为 Version 2017.05.22， 安 装 介质 说 明 如 表 3-7 所 示 。 


表 3-7 Nutanix 社 区 版 安装 介质 说 明 


项 = 文件 名 
Nutanix 社区 版 初始 安放 介质 ce-2017.05.22-stable.img.gz 
Prism Central 484} Jit ce-pc-2017.05.22.tar 
Nutanix 社区 版 及 Prism Central 升级 包 ce-2017.05.22-upgrade.tar.gz 
Nutanix AHV 升级 包 host-bundle-el7.nutanix.20170505.tar.gz 


MSI Installer for VirtIO 1.1.1 
或 ISO Installer for VirtIO 1.1.1 
Metadata 数据 包 ce-2017.05.22-metadata.zip 


Nutanix AHV 虚拟 机 豫 动 包 


Q 1. 介 质 下 载 完 毕 之 后 ， 一 定 使 用 MD5 校 验 工具 ， 检 查 下 载 的 介质 MD5 与 网 站 所 列 的 MD5 信 息 是 否 一 致 ， 如 不 一 致 ， 建 议 重新 下 载 。 
2. 如 升级 已 有 的 Nutanix 社 区 版 环境 ， 除 下 载 升 级 包 之 外 ， 还 要 下 载 Metadata 数 据 包 ， 解 压 之 后 获得 对 应 的 json 文 件 。 


可 以 按照 上 述 下 载 地 址 和 方式 下 载 对 应 的 介质 ， 下 载 完 成 之 后 ， 通 过 M D5 校 验 无 误 之 后 ， 融 可 以 使 用 满足 3.1 节 中 所 列 的 启动 设备 制作 局 动 镜像 盘 。 制 作 镜 像 前 ， 浏 览 表 3-5 了 解 Nutanix 社 
区 版 安 六 建议 。 以 Mac OS X 环 境 为 例 ， 镜 像 制作 方法 如 下 : 


插入 作为 启动 设备 的 U 盘 ， 打 开 Mac OS X 终 端 运行 下 面 命令 ， 列 出 存储 设备 : 


# diskutil list 


查看 U 盘 的 详细 信息 : 


# diskutil info /dev/disk3 


使 用 dd 命令 烧 制 安装 镜像 到 U 盘 : 


# sudo dd if-/../ce-2017.05.22-stable.img of=/dev/rdisk3 bs-1m 


等 待命 令 执行 完毕 ， 终 端 窗口 中 提示 启动 镜像 制作 完成 。 


现在 已 经 完成 Nutanix 社 区 版 启动 设备 的 制作 ， 接 下 来 我 们 就 可 以 进入 Nutanix 社 区 版 安装 阶段 。 


3.3.2 ”安装 Nutanix 社 区 版 


执行 Nutanix 社 区 版 安装 之 前 ， 需 要 规划 集群 网 络 配 置信 息 ， 以 便 在 集群 安装 过 程 中 使 用 ， 可 以 参照 表 3-8 进 行 网 络 规划 。 


表 3-8 安装 环境 网 络 检查 表 


项 目 示例 (UITARE ADI) 
主机 IP 地 址 (用 于 安 Nutanix AHV HY ENL) 10.68.69.101~10.68.69.103 
ENLT RHE 255.255.2550 
主机 网 关 地 址 10.68.69.1 


CVM IP 地 址 〈 该 地 址 即 为 Nutanix Prism 集群 管理 控制 台 登 录 地 


, 10.68.69.104~10.68.69.106 
址 以 及 SSH 终端 链接 地 址 ) 


CVM T RHEI 255.255.255.0 
CVM 网 关 地 址 10.68.69.1 


OO, 1.Nutanix 建 议 为 主机 及 CVM 使 用 静态 IP 地 址 。 
2.Nutanix 社 区 版 将 占用 192.168.5.0 到 192.168.5.254 地 址 段 作为 内 部 通信 使 用 ，Nutanix 建 议 使 用 10.x.x.x 或 172.x.x.x 地 址 段 中 的 IP 地 址 作为 主机 及 CVM 的 IP 地 址 。 
除了 准备 USB 启 动 设备 和 集群 网 络 地 址 信息 之 外 ， 还 需要 了 解 Nutanix 社 区 版 的 初始 访问 凭证 ， 表 3-9 是 Nutanix 社 区 版 初始 访问 凭证 信息 。 


#3-9 ”Nutanix 社 区 版 初始 访问 凭证 信息 


& n 链接 目标 密码 
Prism Sei PAUP A TT ‘scans 
SHH 2€ FP! "jj 
SSH Æ Pr Nutanix AHV 主机 — má 
Prism Central 管理 控制 合 Prism Central VM admin 


o 注意 1.Nutanix 社 区 版 安装 完毕 后 ， 第 一 次 登录 时 ， 需 要 使 用 用 户 名 admin 和 初始 密码 登录 Ptism 集 群 管理 控制 台 ， 修 改 admin 用 户 初始 密码 。 

2. 修 改 admin 用 户 的 初始 密码 之 后 ， 新 的 密码 将 同步 到 CVM，Prism 集 群 管理 控制 台 和 SSH 接 口 。 

至 此 ， 你 已 经 完成 Nutanix 社 区 版 安装 前 所 需 的 全 部 准备 工作 。 接 下 来 就 可 以 使 用 前 面 所 准备 好 的 USB 启 动 设备 正式 进入 Nutanix 社 区 版 安装 过 程 ， 详 细 步 又 如 下 : 
© 注意 ”安装 及 运行 Nutanix 社 区 版 期 间 ， 请 不 要 移 除 USB 启 动 设 备 。 


1) 将 Nutanix 社 区 版 的 USB 局 动 设备 插入 待 安 妆 Nutanix 社 区 版 的 服务 器 USB 端 口 ， 打 开 服 务 器 电源 ， 进 入 服务 器 BIOS9， 将 第 一 启动 设备 设置 为 “USB 设 备 ”， 保 存 设 置 ， 重 新 局 动 服务 


2) 服务 器 进入 Nutanix 社 区 版 安装 引导 界面 ， 选 择 第 一 个 选项 ， 按 “ 回 车 ” 键 继续 ， 如 图 3-12 所 示 。 


Nutanix Community Edition, with Linux $.10.0-229 4.2.elL/.nutanix.201580515.x86 64 
S /5ü0fdé6fc/48c898be2dl1fabe?28cb 


NU LANI» 


图 3-12 Nutanix 社 区 版 安装 引导 界面 
3) 等 待 安装 信息 载 入 完毕 之 后 ， 显 示 Nutanix Community Edition 欢 迎 信息 ， 输 入 install， 不 需要 输入 密码 ， 按 “ 回 车 ” 键 继 续 ， 如 图 3-13 所 示 。 


Nutanix Community Edition 
Welcome to Nutanix Community Edition. Please login with 
the ‘install’ user (no password) to begin the installation. 


nutanix-ce login: 


图 3-13 ”Nutanix 社 区 版 安装 欢迎 信息 


4) 进入 Nutanix Community Edition 安 装 器 ， 选 择 键盘 布局 后 ， 选 择 “Proceed”， 按 “ 回 车 ” 键 继续 ， 如 图 3-14 所 示 。 


图 3-14 Nutanix 社 区 版 键盘 布局 选择 界面 


5) 进入 IP 地 址 信息 输入 页 面 ， 参 考 表 3-8 输 入 主机 IP 地 址 、CVM 地 址 信息 和 DNS 服务 器 地 址 信息 。 阅 读 CE EULA 到 最 底部 ， 然 后 选择 “| accept the end user license agreement” , iX 
择 “Sstart”， 按 “ 回 车 ” 键 继续 ， 如 图 3-15 所 示 。 


<< Nutanix Community Edition Installer >> 
Nutanix OS (NOS) version 2615.66.406-BETA will be installed. 
NOTE: Leaving the IP information below blank will trigger 


the use of DHCP, which is not recommended unless the IP 
addresses are assigned statically in your DHCP server. 


Host IP Address : 192.166.211.248 
Host Subnet Mask : 295.295.299.0 
Host Gateway : 192.168.211.2 
CUM IP Address : 192.168.211.2H 
CUM Subnet Mask : £55.255.255.4 
CUM Gateway : 192.168.211.Z 


[x] Create single-node cluster? DNS Server (req'd): 8.8.8.8 


JEEE EEEE EEEE OE Oe ee E E EEEE- E EEE 


COMMUNITY EDITION END USER LICENSE AGREEMENT 


i i 
g I 
i IMPORTANT - READ CAREFULLY i 
i i 
READ THIS COMMUNITY EDITION END USER LICENSE AGREEMENT 
i (THE “AGREEMENT ) BEFORE DOWNLOADING, INSTALLING, COPYING, i 
(CONFIGURING, ACCESSING, DEPLOYING ANDOR USING THE i 
iSUFTWARE. BY DOWNLOADING, INSTALLING, COPYING, i 
(CONFIGURING, ACCESSING, DEPLOYING AND/OR OTHERWISE USING i 
IALL OR ANY PART OF THE SOFTWARE OR BY CLICKING ON AN 
1 ACCEPT” BUTTON, YOU AGREE TO THE TERMS AND CONDITIONS OF i 
i THIS AGREEMENT. ‘YOU FURTHER AGREE THAT YUU ARE BOUND BY i 
IND ARE A PARTY TO THIS AGREEMENT, AND, IF YOU ARE i 
ICCEEIING THESE TERMS ON BEHALF OF ANOTHER PERSON OR A i 
iCOMPANY OR OTHER LEGAL ENTITY, YOU REPRESENT AND WARRANT i 
1 THAT YOU HAVE FULL AUTHORITY TO BIND THAT PERSON, COMPANY, i 


[E$] I accept the end user license agreement. (Spacebar to toggle) 
Cancel start 


图 3-15 Nutanix 社 区 版 网 络 信息 输入 界面 


Le 
» 注意 1.73649 “Create single-node cluster? ”为 创建 单 节点 集群 的 选项 ， 如 选择 该 项 ，Nutanix 社 区 版 安装 过 程 中 会 自动 创建 单 节 点 集群 。 
2. 需 要 输入 DNS Server IP 地 址 。 


3. 需 要 将 CE EULA 内 容 完 全 浏览 ， 使 用 键盘 将 内 容 滚动 到 最 底部 ， 否 则 无 法 继续 下 一 步 。 


6) Nutanix 社 区 版 进入 安 闭 状态 ， 一 旦 安装 成 功 ， 你 将 收 到 “Success! ”的 提示 信息 ， 按 “ 回 车 ” 键 继 续 ， 如 图 3-16 所 示 。 


success! Press <Enter> to return the login prompt. 


Please refer to the documentation for next steps. 
The login banner will show the IP address of the CUM. 


图 3-16 ”Nutanix 社 区 版 安装 完成 提示 界面 


7) 屏幕 出 现 登 录 提示 ， 并 显示 了 该 主机 CVM 的 iP 地址， 如 图 3-17 所 示 。 


Hint: Hum Lock on 


NTNX- log in: 


图 3-17 Nutanix 社 区 版 主机 登录 提示 界面 


完成 以 上 步骤 之 后 ， 如 果 只 是 创建 单 节点 集群 ， 就 已 经 完成 了 Nutanix 社 区 版 的 安装 ; 如 果 要 创建 的 是 多 节点 集群 (三 节点 或 者 四 节点 ) ， 只 需要 重复 上 面 的 步骤 1 到 步骤 7， 完 成 余下 节点 
的 Nutanix 社 区 版 的 安装 。 


完成 所 有 节操 的 安装 之 后 ， 下 面 将 开始 Nutanix 社 区 版 AOS 和 集群 的 创建 。 


3.3.3 AOS 集群 创建 
我 们 已 将 Nutanix 社 区 版 安装 好 ， 可 以 进入 Nutanix AOS 集 群 的 创建 阶段 。 如 前 所 述 ，Nutanix 社 区 版 支持 单 节点 集群 和 多 节点 集群 (三 节点 或 四 节点 ) ， 所 以 ， 在 接 下 来 的 内 容 中 我 们 将 
按照 如 下 顺序 讲解 Nutanix AOS 集 群 创建 : 


创建 单 节点 集群 


3.3.3.1 创建 单 节点 集群 

单 节点 集群 的 数据 RF 为 1， 即 所 有 数据 仪 存放 1 份 副本 ; 集群 的 数据 元 余 性 机 制 对 于 单 节点 集群 而 言 是 无 效 的 ， 相 比 于 多 节点 集群 ， 单 节点 集群 也 无 法 提供 高 可 用 机 制 (HA). 

一 旦 完成 单 节点 集群 的 创建 ， 无 法 直接 将 该 集群 扩展 为 多 节点 集群 。 如 需 扩展 ， 需 要 先 删 除 该 集群 ， 然 后 创建 一 个 新 的 多 节点 集群 。 如 何 删 除 一 个 集群 ， 可 以 参见 后 续 的 3.3.3.3 节 。 下 面 的 
步骤 将 讲解 如 何 使 用 命令 手动 创建 单 节点 集群 。 

©, 如 在 安装 过 程 中 已 经 勾 选 了 “Create single-node cluster? ”选项 ， 那 么 Nutanix 社 区 版 在 安装 过 程 中 就 已 经 自动 创建 单 节 点 集群 ， 用 户 就 可 以 跳 过 如 下 步骤 


1) 在 Nutanix 社 区 版 主机 登录 提示 界面 ， 使 用 Nutanix AHV 主 机 用 户 名 root 和 密码 nutanix/4u 登 录 到 Nutanix AHV 主 机 。 


2) 使 用 CVM 的 用 户 名 nutanix 和 密码 nutanix/4u， 通 过 安全 Shell 会 话 (SSH) 登录 到 CVM， 如 图 3-18 所 示 。 


# ssh nutanix@192.168.5.2 
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图 3-18 ”登录 到 CVM 


3) 使 用 如 下 命令 创建 单 节点 集群 ， 其 中 cvm ip 为 Controller VM 的 IP 地 址 ， 如 图 3-19 所 示 。 


$ cluster -s cvm_ ip create 


4) 等 待命 令 执行 完毕 ， 系 统 自 动 局 动 单 节操 集群 服务 ， 如 图 3-20 所 示 。 


5) 设置 集群 的 关键 参数 。 


a) 设置 集群 名 称 ， 如 图 3-21 所 示 。 


$ ncli cluster edit-params new-name=cluster nam 


b) 配置 DNS 服 务 器 ， 并 验证 DNS 服 务 器 配置 ， 如 图 3-22 所 示 。 


$ ncli cluster add-to-name-servers servers-"dns IPl,dns IP2" 
$ ncli cluster get-name-servers 


c) 配置 NTP 服 务 器 ， 并 验证 NTP 服 务 器 配置 ， 如 图 3-23 所 示 。 


$ ncli cluster add-to-ntp-servers servers-"ntp NAMEl1,ntp NAME2" 
$ ncli cluster get-ntp-servers 
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图 3-23 ”配置 NTP 服务 器 
完成 上 述 操作 之 后 ， 便 已 经 完成 单 节点 集群 的 配置 ， 如 需 更 新 集群 配置 信息 ， 可 以 重复 上 述 步骤 中 的 步骤 5 对 集群 配置 进行 修改 。 
3.3.3.2 创建 多 节点 集群 


Nutanix 社 区 版 支持 多 节操 集群 ， 即 三 节操 集群 或 四 节操 集群 ， 多 节点 集群 可 以 支持 的 最 大 数据 见 余 因子 为 2， 即 集群 RF=2， 所 有 数据 存放 2 份 副本 ;这 束 意 味 着 多 节操 集群 可 以 容忍 一 个 
节点 或 一 个 驱动 器 的 故障 。 


如 果 在 安装 Nutanix 社 区 版 过 程 中 ， 勾 选 了 “Create single-node cluster? ”选项 ， 那 么 需要 先 删 除 该 集群 ， 然 后 创建 一 个 新 的 多 节点 集群 。 如 何 删 除 一 个 集群 ， 可 以 参见 后 续 的 3.3.3.3 


下 面 的 步 又 将 讲解 如 何 使 用 命令 手动 创建 多 节操 集群 。 


O- 如 果 环 境 中 的 子 网 启用 了 IPv6， 可 以 使 用 基于 Web 浏 览 器 的 图 


S 


界面 完成 多 节点 集群 的 创建 和 配置 。 如 环境 中 的 子 网 未 启用 IPv6， 则 按照 下 面 的 步骤 使 用 命令 手动 创建 多 节点 集 


关于 基于 Web 浏 览 器 的 图 形 界面 创建 多 节点 集群 的 具体 方法 ， 请 查阅 Nutanix 官 方 资料 ， 链 接 如 下 : https://portal.nutanix.com/#/page/docs/details? 
ps://p pag 


tatgetid-Nutanix Community Edition Getting Started: com_cluster_config_multinode_ce_t.html#ntask_dbk_n3h_fr 
1) 在 Nutanix 社 区 版 主机 登录 提示 界面 ， 使 用 Nutanix AHV 主 机 用 户 名 root 和 密码 nutanix/4u 登 录 到 Nutanix AHV 主 机 。 


2) 使 用 CVM 的 用 户 名 nutanix 和 密码 nutanix/4u， 通 过 安全 Shell 会 话 (SSH) 登录 到 CVM ， 如 图 3-24 所 示 。 


# ssh nutanix@192.168.5.2 
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图 3-24 登录 到 CVM 


3) 使 用 如 下 命令 创建 多 节点 集群 ， 其 中 cvm_ip_addrs 为 Controller VM 的 IP 地 址 ， 如 图 3-25 所 示 。 


$ cluster -s cvm ip addrs create 


图 3-25 创建 多 节点 集群 


4) 使 用 如 下 命令 启动 集群 服务 ， 如 图 3-26 所 示 。 


$ cluster start 


INFO 


上 述 命令 将 启动 Nutanix 集 群 ， 图 3-27 列 出 了 集群 的 状态 ， 如 果 集 群 状态 正常 ， 所 有 的 服务 应 该 显示 为 UP 状态 。 


The state of the clus r: start 


Lockdown mode: Disab 


CVM: 


Stargate 
InsightsDB 


InsightsDatalIransfer 


EF 


HutanixGuestIlIools 
MinervaCVvM 


5) 设置 集群 的 关键 参数 。 


a) 配置 集群 名 称 ， 如 图 3-28 所 示 。 


$ ncli cluster edit-params new-name-cluster name 


nutanix!i 


Id 
Duid 
Name 
Version 
IP Address 
Data 


Cluster 
Cluster 
Cluster 
Cluster 


External 


External 


Services 


b) 配置 DNS 服务 器 ， 并 验证 DNS 服务 器 配置 ， 如 图 3-29 所 示 。 


$ ncli cluster add-to-name-servers servers="dns IPl,dns IP2" 
$ ncli cluster get-name-servers 
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cluster edit-params 


图 3-28 配置 集群 名 称 
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图 3-29 ”配置 DNS 服务 器 


c) 配置 NTP 服 务 器 ， 并 验证 NTP 服 务 器 配置 ， 如 图 3-30 所 示 。 


$ ncli cluster add-to-ntp-servers servers="ntp NAME1,ntp_ NAME2" 
$ ncli cluster get-ntp-servers 


图 3-30 ”配置 NIP 服务器 


d) 配置 集群 的 外 部 IP 地 址 ， 并 查看 集群 配置 信息 ， 如 图 3-31 所 示 。 


$ ncli cluster set-external-ip-address external-ip-address="cluster IP" 
$ ncli cluster get-params 


完成 上 述 操作 之 后 ， 便 配置 好 了 多 节点 集群 ， 如 需 更 新 集群 配置 信息 ， 可 以 重复 上 述 步骤 中 的 步骤 5 对 集群 配置 进行 修改 。 
3.3.3.3 ”删除 一 个 集群 


当 需 要 重 置 Nutanix 社 区 版 环境 的 集群 时 ， 可 以 选择 删除 一 个 集群 ， 然 后 重新 创建 集群 即 可 。 注意 的 是 ， 一 旦 集群 被 删除 ， 原 有 集群 的 所 有 配置 信息 以 及 集群 中 所 运行 的 虚拟 机 数据 都 
不 可 再 恢复 。 
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图 3-31 配置 集群 外 部 IP 地 址 
删除 一 个 集群 的 操作 步骤 如 下 : 


1) 使 用 CVM 的 用 户 名 nutanix 和 密码 nutanix/4u， 通 过 安全 Shell 会 话 (SSH) 登录 到 CVM。 


# ssh nutanix@cvm ip 


2) 停止 集群 服务 ， 服 务 停止 后 会 显示 集群 状态 ， 如 图 3-32 所 示 。 


$ cluster stop 


~$ [cluster stop 


zookeeper session.py:l102 cluster is attempting to connect to Zook 


Operation will stop 
unavailable. | Do 


= 


07:40:36 INFO zo 


集群 服务 停止 成 功 后 ， 会 显示 如 图 3-33 所 示 的 界面 。 
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UCCeESS 


停止 集群 服务 


3) 使 用 命令 行 删除 集群 ， 如 图 3-34 所 示 。 


Qs 一 旦 执行 集群 删除 命令 ， 将 删除 全 部 集群 信息 以 及 集群 中 运行 虚拟 机 的 全 部 数据 。 请 在 执行 命令 前 ， 做 好 重要 数据 的 备份 。 


S cluster destroy 


图 3-34 删除 集群 服务 


4) 查看 环境 集群 状态 ， 验 证 集群 已 被 删除 ， 如 图 3-35 所 示 。 


$ cluster status 


ee 


Lm Et -ie e <= Ls 


图 3-35 ”验证 集群 删除 结果 


删除 集群 之 后 ， 可 以 重新 创建 新 的 集群 ， 并 设置 新 的 集群 配置 。 熟 悉 了 集群 的 创建 和 删除 之 后 ， 我 们 将 基于 一 个 新 建 的 集群 讲解 初次 登录 Nutanix Prism 集 群 管理 控制 台 。 


3.3.4 登录 Prism 集 群 管理 控制 台 


在 上 一 节 中 ， 已 经 完成 了 集群 的 创建 使 用 Web 浏 | 览 器 可 以 访问 Prism 集 群 管理 控制 人 台 ， 在 浏览 器 中 输入 CVM 的 iP 地址 ， 如 : 


https://cvm ip:9440/console/ 


Os Prism 集 群 管理 控制 台 兼容 的 浏览 器 有 : 
Firefox 最 新 及 向 前 两 个 主要 版 本 。 

- Chrome 最 新 及 向 前 两 个 主要 版 本 。 

: Safari 最 新 及 向 前 两 个 主要 版 本 。 

: Internet Explorer 10 和 11。 


: Microsoft Edge. 


第 一 次 登录 时 ， 使 用 CVM 的 用 户 名 admin 和 密码 Nutanix/4u， 登 录 成 功 后 ， 系 统 会 提示 输入 新 的 密码 ， 如 图 3-36 所 示 。 


PRISM 


Create a new password for the cluster admin. 


admin 


Note: When you change the admin user password, update any applications dnd scripts using 
the admin user credentials for authentication. Nutanix recommends that you create a user 
assigned with the admin role instead of using the admin user for authentication. The Prism 
Web Console Guide describes authentication and roles. 


修改 Ptrism 控 制 台 初始 密码 


Qi Prism 集 群 管理 控制 台新 密码 需要 满足 如 下 规则 : 

密码 长 度 最 少 为 8 个 字符 ; 

. 至 少 包 含 1 个 小 写字 母 ，1 个 大 写字 母 ，1 个 数字 以 及 1 个 特殊 字符 ; 

. 至 少 有 4 个 字符 不 同 于 原来 的 密码 ; 

. 不 可 使 用 最 近 设 置 过 的 10 个 密码 。 

新 的 密码 设置 成 功 后 ， 将 自动 跳 转 到 账户 输入 页 面 ， 并 提示 密码 修改 成 功 ， 如 图 3-37 所 示 。 


使 用 CVM 的 用 户 名 admin 和 修改 后 的 新 密码 ， 登 录 成 功 后 ， 系 统 会 提示 输入 Nutanix Next 社 区 账号 信息 ， 需 要 将 在 图 3-38 所 示 的 窗口 中 输入 Nutanix Next 社 区 账户 信息 。 


Your password was successfully changed. Please login with your new 


password. 


图 3-37 ”Ptism 控 制 台 登 录 窗 口 


*| NEXT Credentials 


Please enter your NEXT account 


information to access the cluster. 


NEAT username 


NEXT password 


Create account 


Forgot your password? 


图 3-38 Nutanix Next 社 区 账户 信息 输入 窗口 


输入 Nutanix Next 社 区 账户 信息 ， 等 待 验证 通过 之 后 ， 页 面 将 自动 跳 转 到 Prism 集 群 管理 控制 台 首页 ， 如 图 3-39 所 示 。 
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图 3-39 ”Ptism 集 群 管理 控制 台 首 页 


3.3.5 ”安装 Prism Central 


Nutanix 提 供 统一 的 多 集群 管理 控制 台 ， 以 监控 和 管理 多 个 集群 ， 这 个 多 集群 管理 控制 台 就 是 Prism Central, 
Prism Central 作 为 一 个 独立 运行 的 虚拟 机 ， 是 一 个 Nutanix 环 境 多 集群 的 集中 管理 工具 ， 可 以 提供 如 下 特性 : 
. 单 点 登录 所 有 注册 到 Piism Central 的 集群 。 

可 按 需 自 定 义 跨 集群 地 监控 信息 仪表 盘 。 

. 支持 多 实体 类 型 信息 展现 ， 包 括 虚 拟 机 、 集 群 、 主 机 、 磁 盘 以 及 存储 容器 ; 并 支持 一 键 式 点 击 实体 对 象 查看 对 象 详 细 信 息 。 
- 多 集群 容量 分 析 能 力 ， 可 支持 Nutanix AHV, VMware vSphere, Microsoft Hyper-V。 
` 多 集群 告警 信息 展现 ， 并 支持 一 键 式 点 击 告 警 信息 查看 告警 触发 的 可 能 原因 及 改正 操作 建议 。 
+ 支持 通过 Prism Central 直 接 配 置 已 注册 集群 ， 也 可 通过 一 键 式 点 击 的 方式 直接 访问 菜 一 已 注册 的 Prism 集 群 管理 控制 人 台 。 


Nutanix 社 区 版 支持 Prism Central 的 安装 ， 后 续 内 容 中 所 设计 的 安装 操作 是 基于 本 书写 作 时 Nutanix 社 区 版 201.05.22 版 本 ， 该 版 本 已 经 支持 在 Prism 集 群 管理 控制 台中 一 键 式 部 署 Prism 
Central 的 功能 。 


如 需 了 解 更 多 关于 Prism Central 的 安装 和 配置 内 容 ， 可 以 访问 如 下 链接 : 

https://portal.nutanix.com/#/page/docs/details? targetld=Prism-Central-Guide-Prism-v51: Prism-Central-Guide-Prism-v51 
接 下 来 的 内 容 将 按照 Nutanix 社 区 版 中 一 键 式 部 署 Prism Central 功 能 进行 讲述 ， 详 细 步 骤 如 下 : 

1) 在 浏览 器 输入 https://cvm ip: 9440/console/， 使 用 CVM 的 用 户 名 admin 和 修改 后 的 密码 ， 登 录 Prism 控 制 台 。 


2) 点 击 Prism 控 制 台 主页 的 右上 角 "El (设置 ) 按钮 ， 弹 出 集群 设置 菜单 ， 点 击 “Prism Central Registration”， 如 图 3-40 所 示 。 


图 3-40 .&a “Prism Central Registration” 


3) 弹出 Prism Central 注 册 窗 口 ， 可 以 选择 将 目前 Nutanix 社 区 版 集群 连接 到 已 有 的 Prism Central， 也 可 以 选择 部 署 一 个 新 的 Prism Central; 我 们 选择 “Deploy a new Prism 
Central” ， 开 始 Prism _ Central 部署， 如 图 3-41 所 示 。 
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图 3-41 


部 署 新 的 Prism Central 虚 拟 机 


4) 窗口 跳 转 到 Prism Central 安 装 向 导 页 面 ，Nutanix 社 区 版 环境 可 以 直接 连接 互联 网 ， 所 以 系统 会 自动 同步 Nutanix 官 方 镜像 服务 器 ， 获 取 最 新 的 可 用 的 Prism Central 资 源 ， 可 以 选 
择 “Download” 由 系统 在 后 台 自 动 下 载 ， 或 选择 “upload the Prism Central binary” 上 传 已 经 下 载 好 的 Prism Central 介 质 ， 如 图 3-42 所 示 。 
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图 3-42 Prism Centtal 安 装 介 质 获 取 方 式 


5) 我 们 选择 “upload the Prism Central binary” 上 传 已 经 下 载 好 的 Prism Central 介 质 以 及 对 应 的 metadata.json 文 件 ; 选择 好 介质 文件 之 后 ， 点 击 


"Upload Now" ， 如 图 3-43 所 示 。 
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图 3-43 ”手动 上 传 Prism Centtal 安 装 介质 
6) 等 待 介质 上 传 过 程 完成 后 ， 点 击 “Install” 按 钮 ， 进 入 Prism Central 虚 拟 机 安装 配置 窗口 ， 如 图 3-44 所 示 。 
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图 3-44 Prism Central 安装 介质 上 传 完 成 
7) 在 Prism Central 虚 拟 机 安装 配置 窗口 中 ， 需 要 输入 “VM Name" 


(虚拟 机 名 称 ) ， 选 择 “VM Sizing" (虚拟 机 大 小 ) ， 配 置 虚拟 机 网 络 ; 完成 上 述 内 容 之 后 ， 可 以 直接 点 
ik "Install" 提交 创 建 Prism _ Central 虚拟 机 的 任务 ， 如 图 3-45 所 示 。 
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o 


Network Config 


* Create Network Disable auto-registration 


lve tall Back 


Network Conf ag 


NTNX-CE 


1921681200 


1 the network Disable auto-registration 


— C3 


图 3-45 Prism Centtal 虚 拟 机 配置 窗口 
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SR 


+ Create Network 


3 会 随 虚 拟 机 创建 而 自动 创建 。 


2.Prism Central 虚 拟 机 大 小 有 两 种 默认 规格 ， 按 照 Prism Central 接 管 虚拟 机 规模 分 为 “Small- (UP to 2500VMs) ” fe “Large- (UP to12500VMs) ”两 种 规格 ， 一 旦 选择 规格 类 型 ， 虚 拟 机 会 自 


动 申请 该 规格 所 需 的 CPU、 内 存 和 存储 资源 。 


3. 因 未 在 集群 中 创建 网 络 ， 故 网 络 配置 (Network Config) 选项 中 ， 文 本 框 显示 灰色 ， 所 以 ， 要 先 选 择 “Create Network" , APrism Central 虚 拟 机 创建 一 个 虚拟 机 网 络 ， 如 果 环 境 中 没有 划分 


VLAN, JEVLAN ID 中 输入 “0” 即 可 。 


4. 创 建 好 网 络 之 后 ， 就 可 以 在 网 络 配置 (Network Config) 中 的 文本 框 中 输入 Prism Central 虚拟 机 的 地 址 信息 。 


5. 如 勾 选 窗口 最 下 面 的 “Disable auto-registration” wR, Prism Central 安 装 完成 之 后 ， 本 集群 将 不 自动 注册 到 Prism Central. 


8) 提交 Prism Central 虚 拟 机 安装 任务 之 后 ， 可 以 在 Prism 控 制 台 主页 看 到 任务 进展 ， 如 图 3-46 所 示 。 
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图 3-46 Prism Central 虚 拟 机 安装 任务 进度 
9) 大 约 等 待 8 分 钟 ， 系 统 完成 Prism Central 虚 拟 机 的 创建 ， 如 图 3-47 所 示 。 

OPERATION MESSAGE ENTITY PERCENT STATUS CREATE TIME DURATION 
Download and deploy prism central Cluster | Details 00% Succeeded D618/T7, 21157 PM B minutes 


图 3-47 Prism Central 虚拟 机 创建 任务 完成 


10) 可 以 选择 “VM” (虚拟 机 ) 页 面 查看 Prism Central 虚 拟 机 信息 ， 如 图 3-48 所 示 。 
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图 3-48 ”查看 Prism Central 虚 拟 机 信息 


11) 在 浏览 器 输入 https://prism-central ip: 9440/console/， 使 用 Prism Central 的 用 户 名 admin 和 密码 admin， 登 录 Prism Central 控 制 台 ， 如 图 3-49 所 示 。 


图 3-49 第 一 次 登录 Prism Centraldz #] 4 


12) 第 一 次 登录 成 功 后 ， 系 统 会 提示 输入 新 的 密码 ， 新 设置 密码 的 规则 与 Prism 控 制 台 的 密码 规则 一 致 ， 如 图 3-50 所 示 。 


Create a new password for the cluster admin. 


admin 


Note: When you change the admin user password, update any applications and scripts using 
the admin user credentials for authentication. Nutanix recommends that you create a user 
assigned with the admin role instead of using the admin user for authentication. The Prism 
Web Console Guide describes authentication and roles. | 


图 3-50 ”修改 Prism Central E #2 42 4] & 41 45 FAG 


o Prism Central 管 理 控制 台新 密码 需要 满足 如 下 规则 : 
密码 长 度 最 少 为 8 个 字符 ; 

字母 ，1 个 大 写字 母 ，1 个 数字 以 及 1 个 特殊 字符 ; 
- 至 少 有 4 个 字符 不 同 于 原来 的 密码 ; 


. 不 可 使 用 最 近 设置 过 的 10 个 密码 。 


13) 完成 密码 修改 之 后 ， 使 用 新 设置 的 密码 登录 Prism Central 控 制 侣 ， 登 录 成 功 后 ， 


如 图 3-51 所 示 。 


系统 会 提示 输入 Nutanix Next 社 区 账户 信息 ， 需 要 在 下 面 的 窗口 中 输入 Nutanix Next 社 区 账户 信息 ， 
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图 3-51  Nutanix Next 社 区 账户 输入 窗口 


14) 输入 Nutanix Next 社 区 账户 信息 ， 等 待 验证 通过 之 后 ， 页 面 将 自动 跳 转 到 Prism Central 管 理 控制 台 首 页 ， 如 图 3-52 所 示 。 
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图 3-52 Prism Centtal 管 理 控制 台 首 页 


15) 截至 上 一 步 ，Prism Central 安装 完毕 ， 接 下 来 需要 将 Nutanix AOS 集 群 注册 到 安装 好 的 Prism Central, 
O. a s : " [ NE R " » 、 - B more Ass 
注意 ”如 果 在 创建 Prism Central Æ djs], ALY “Disable auto-tegisttation” 选 项 ， 那 么 需要 参照 接 下 来 的 步骤 ， 手 动 完成 注册 。 
如 未 匀 选 “Disable auto-registration” ， 在 Prism Central 虚 拟 机 创建 过 程 中 ， 系统 已 自动 完成 了 注册 ， 可 以 跳 过 接 下 来 的 步骤 ， 学 习 下 一 节 的 内 容 。 


16) 使 用 Web 浏 览 器 登录 Prism 集 群 管理 控制 台 (Prism 控 制 台 ) : https://cvm_ip: 9440/console/， 输 入 用 户 名 admin 及 密码 。 


17) 在 Prism 控 制 台 首页 ， 点 击 Prism Central 部 件 中 的 “注册 ” (Register) ， 如 图 3-53 所 示 。 
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图 3-53 ”注册 到 Prism Central 


18) 弹出 Prism CentralI 注 册 窗 口 ， 点 击 “Connect to an existing Prism Central”， 将 目前 Nutanix 社 区 版 集群 连接 到 已 有 的 Prism Central， 如 图 3-54 所 示 。 窗 口 切 换 到 填写 Prism 
Central 信 息 界 面 ， 输 入 已 部 署 Prism Central 李 置信 息 ， 点 击 “Connect”， 如 图 3-55 所 示 。 完 成 集群 到 Prism Central 的 注册 ， 如 图 3-56 所 示 。 
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图 3-54 .&a “Connect to an existing Prism Central” 


Connect to an existing Prism Central instance 


Please fill in the information needed to establish a connection 
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3.4 Nutanix 社 区 版 操作 


通过 本 章 前 4 节 的 讲解 ， 你 已 经 对 Nutanix 社 区 版 有 了 完整 的 了 解 ， 有 条 件 的 读者 可 以 动手 完成 Nutanix 社 区 版 的 安装 ， 并 准备 操作 环境 ， 用 以 完成 本 节 所 涉及 的 各 系统 的 基础 操作 ， 包 括 
Prism 控 制 台 、Self-Service Portal, Prism Central 及 常见 的 排 错 操作 。 


3.4.1 Prism 控 制 台 操 作 


可 以 通过 如 下 两 种 方式 实现 对 Nutanix 社 区 版 集群 中 所 有 实体 对 象 的 监控 和 配置 ， 包 括 虚 拟 机 、 人 存储 容器 、 数 据 保 护 、 日 志 告 警 ， 以 及 硬件 组 件 。 
- 基于 Web 的 管理 控制 台 一 一 Prism 控制 台 
命令 行 接口 一 一 nCLI 


其 中 ，Prism 控 制 台 是 一 个 图 形 界面 (GUI) ， 又 被 称 为 “Prism Element”， 提 供 了 集群 大 部 分 监控 和 操作 功能 ， 对 于 一 般 的 管理 操作 ， 使 用 Prism 控 制 台 即 可 。 但 是 ， 一 些 集 群 的 高 级 特 
性 或 新 推出 的 特性 需要 使 用 命令 行 接 口 (NCL) 完成 操作 ，Nutanix 建 议 通 过 命令 行 接口 执行 管理 操作 之 前 ， 一 定 要 严格 参照 官方 文档 ， 以 防 对 集群 的 正常 服务 造成 影响 。 


在 3.3.4 节 中 我 们 已 经 熟悉 了 如 何 登 录 Prism 控 制 台 ， 所 以 在 接 下 来 的 内 容 中 不 再 对 Prism 控 制 台 的 登录 操作 做 介绍 ， 更 多 的 是 对 Nutanix 社 区 版 环境 的 Prism 控 制 台 的 操作 做 一 个 概要 的 介 
绍 ， 包 括 Prism 页 面 的 操作 菜单 介绍 ， 以 及 如 何 使 用 Nutanix 社 区 版 集群 ， 如 创建 存储 容器 、 镜 像 管 理 、 创 建 虚拟 机 等 。 


3.4.1.1 Prism 控 制 台 概览 


Prism 控 制 台 是 Nutanix AOS 集 群 管理 配置 的 统一 门户 界面 ， 又 被 称 为 “Prism Element" , 简称 “PE”; 图 3-57 是 Nutanix 社 区 版 环境 登录 Prism 控 制 台 之 后 一 个 典型 的 窗口 布局 。 


虚拟 化 层 摘要 按 IOPS 的 最 活跃 用 户 虚拟 机 虚拟 机 严重 警报 虚拟 机 事件 


Prism-Central 


Nutanix 


虚拟 机 摘要 按 IO 延迟 的 最 活跃 用 户 虚拟 机 
状态 虐 拟 机 数目 Prism-Central 


es EMESS 


Prism-Central 


按 CPU 使 用 率 的 最 适 跃 用 户 虚拟 机 


n 


Prism-Central 


[3-57 Prism 控制 台布 局 介绍 
. 主 菜单 (Main Menu) : 主 菜 单位 于 Prism 控 制 台 的 顶部 。 主 菜单 从 左 至 右 依次 为 : 
. 集群 名 称 : 点 击 后 ， 弹 出 集群 详细 信息 窗口 。 
SOIR PHB: 点 击 后 ， 弹 出 实体 对 象 下 拉 菜 单 ， 可 选择 进入 对 应 实体 操作 页 面 。 
集群 健康 度 图 标 : 点 击 后 ， 进 入 集群 健康 页 面 。 
: 警报 图 标 : 点 击 后 ， 显 示警 报信 息 摘要 。 
. 事件 图 标 : 点 击 后 ， 显 示 事 件 摘 要 。 
. 搜索 图 标 : 点 击 后 ， 出 现 搜 索 框 。 
帮助 菜单 : 点 击 后 ， 弹 出 帮助 选项 下 拉 菜 单 。 
- 配置 菜单 : 点 击 后 ， 弹 出 所 有 执行 操作 任务 的 下 拉 菜 单 。 
. 用 户 菜 单 : 点 击 后 ， 弹 出 用 户 相 关 操 作 的 下 拉 菜 单 ， 如 更 改 密码 、 更 新 配置 文件 、 注 销 、 访 问 API 资 源 等 。 


- 窗口 菜单 (Screen Menu) : 某 些 实体 的 窗口 页 面 顶部 会 有 窗口 菜单 ， 提 供 该 实体 一 些 操作 选项 。 如 图 3-57 中 虚拟 机 的 窗口 页 面 ， 左 侧 有 “概览 ”和 “ 表 ” 两 个 标签 ， 右 侧 有 “创建 
VM” 和 “网 络 配置 ”两 个 任务 操作 按钮 。 


- 性 能 /健康 及 使 用 情况 (Performance/Health and Usage Statistics) : 大 多 数 实体 的 页 面 都 显示 了 对 应 实体 的 性 能 或 健康 以 及 使 用 情况 ， 以 图 3-57 中 虚拟 机 视图 为 例 ， 提 供 了 虚拟 机 数 
量 ，CPU 和 内 存 使 用 率 ， 以 及 IOPS， 延 迟 和 带宽 信息 。 


- 警报 及 事件 信息 (Alert and event messages) : 显示 实体 相关 的 警报 及 事件 信息 。 在 图 3-57 中 ， 可 以 看 到 虚拟 机 相关 的 警报 及 事件 信息 。 
3.4.1.2 ”配置 菜单 功能 介绍 


配置 菜单 提供 了 Nutanix 社 区 版 大 部 分 的 管理 操作 功能 ， 可 以 通过 点 击 Prism 控 制 台 页 面 的 主 菜单 中 的 齿轮 状 图 标 “ 尼 一 展开 下 拉 菜 单 ， 其 功能 如 表 3-10 所 示 。 


#3-10 ”Nutanix 社 区 版 配置 菜单 列表 说 明 


名 称 Tii 述 
打开 集群 详情 窗口 ， 查 看 或 修改 集群 参数 ， 如 集群 名 称 ， 集 群 虚拟 IP 地 
址 ，ISCSI 数据 服务 IP 地 址 
创建 容 需 (Create Storage Container)| ”打开 创建 存储 容 需 窗口 ， 创 建 一 个 新 的 存储 容 需 


集群 详情 (Cluster Details) 


主机 (Expand Cluster ) 打开 扩展 集群 窗口 ， 增 加 新 的 节点 到 集群 中 
生命 周期 管理 (Life Cycle Manage-| 打开 生命 周期 管理 窗口 ， 使 用 生命 周期 管理 右 ( LCM) 跟踪 集群 中 实体 
ment) 的 软件 及 固件 版 本 


打开 升级 软件 窗口 ， 一 键 式 升级 集群 中 的 Acropolis OS (AOS), 文件 服 


D ET 
升级 软件 (Upgrade Software) 务 ， 虚 拟 化 系统 ， 磁 盘 固 件 等 


身份 验证 (Authentication) 打开 和 号 份 验证 配置 窗口 ， 配 置 AD 身份 验证 信息 
SSL 证 书 (SSL Certificate) 打开 SSL 证 书 窗口 ,创建 或 替换 SSL 证 书 

角色 映射 (Role Mapping) 打开 角色 映射 窗口 ， 配 置 角色 映射 关系 和 操作 权限 
用 户 管 理 (User Management ) 打开 用 户 管理 窗口 ， 添 加 新 用 户 ， 或 更 新 用 户 信 息 


警报 电子 邮件 配置 (Alert Email} 打开 警报 电子 邮件 配置 窗口 ， 配 置 警 报 邮件 的 接收 地 址 、 发 送 规则 ， 以 
Con-figuration ) 及 邮件 内 容 模板 

警报 策略 (Alert Policies) 打开 警报 策略 设置 窗口 ， 设 置 所 有 事件 警报 的 触发 策略 

配置 CVM (Configure CVM) 打开 配置 CVM 窗口 ， 一 键 式 设 置 集 群 CVM 的 内 存 大 小 


名 称 fü y 
HTTP 代理 (HTTP Proxy) 打开 HTTP 代理 设置 窗口 ， 新 增 、 更 新 或 删除 一 个 代理 
NTP 服务 器 (NTP Servers) 打开 NTP 服务 天 设置 窗口 ， 新 增 或 删除 NTP IR as 
打开 SMTP 服务 需 设 置 窗 口 ， 新 增 或 更 新 用 于 发 送 电子 邮件 通知 的 
SMTP Hk 4-4 (SMTP Server) SMTP 服务 器 
PRK as (Name Servers) TIJF A FK A el ERE. 1 nV MR AA PRI AS HR 


打开 网 络 交 换 机 配置 窗口 ， 设 置 环境 中 交换 机 配置 信息 ， 以 跟 踩 并 记录 


En N k Switch 
PAFIS. (Network Switch) 集群 网 络 情况 ， 需 要 提供 第 一 跳 交换 机 及 连接 端口 的 信息 


语言 设置 (Language Settings) 打开 语言 设置 窗口 ， 更 改 Prism 控制 台 显 示 语 言 (已 支持 中 文 ) 

MA 见证 仲裁 注册 (MA Witness | 打开 数据 中 心 双 活 ( Metro Avaliability) ILHE ( Witness) 仲裁 注册 窗口 。 
Registration ) 本 书写 作 时 ，MA 功能 不 支持 AHV 作为 Hypervisor 时 的 场景 

NFS 文件 系统 日 名 单 (Filesystem | 打开 NFS 文件 服务 需 日 名 单 配置 窗口 ， 添 加 或 删除 白 名 单 地 址 ， 使 得 
Whitelists ) AHV/ESXi 主机 以 NFS，Hyper-V 以 CIFS 访问 存储 容器 

Pri 1; Pri l 

bn MORE EEUU USQUE Gente 打开 Prism Central 注册 窗口 ， 将 集群 注册 到 Prism Central 

Registration ) 

SNMP 打开 SNMP 配置 窗口 ， 激 活 并 设置 SNMP 配置 信息 

TARA (Redundancy State) Niro d (Redundancy Factor Readiness) 配置 窗口 ， 设 置 集群 


打开 映像 配置 (Image Configuration) 窗口 ， 导 入 和 管理 可 用 于 创建 虚拟 
机 的 镜像 文件 。 仅 在 Hypervisor 为 AHV 时 有 此 任务 选项 

打开 欢迎 界面 编辑 (Edit Welcome Banner) 窗口 ， 创 建 或 编辑 用 户 登 录 到 
Prism 控制 台 前 出 现 的 欢迎 窗口 消息 

打开 用 户 界面 设置 (UI Settings) 窗口 ， 禁 用 (或 重新 启用 ) 用 户 界面 登 
录 有 效 性 设置 

打开 管理 虚拟 机 高 可 用 性 (Manage VM High Availability) 窗口 ， 实 现 集 
群 中 客户 虚 机 (Guest VM) 的 高 可 用 性 。 仅 在 Hypervisor 为 AHV 时 有 此 
任务 选项 

打开 网 络 配置 (Network Configuration) 窗口 ， 配 置 集群 的 网 络 连接 。 仅 
在 Hypervisor 为 AHV 时 有 此 任务 选项 

打开 脉冲 (Pulse) 配置 窗口 ， 启 用 向 Nutanix Support Team 发 送 集群 故障 
言 县 的 功能 以 便 用 于 分 析 及 定位 故障 

打开 远程 支持 (Remote Support) 设置 窗口 ， 启 用 (或 禁用 ) Nutanix 远程 
文 持 访问 权限 ， 并 设置 访问 时 长 

打开 集群 锁定 (Cluster Lockdown) 窗口 ， 添 加 或 删除 SSH 访问 的 身份 验 
证 秘 钥 。 增 加 集群 链接 的 安全 性 


映像 配置 (Image Configuration) 


欢迎 窗口 (Welcome Banner) 


用 户 界 面 设置 (UI Settings) 


管理 虚拟 机 高 可 用 性 (Manage VM 
High Availability ) 


网 络 配置 ( Network Configuration) 


脉冲 (Pulse) 


远程 文 持 (Remote Support) 


集群 锁定 (Cluster Lockdown) 


3.4.1.3 用户 菜单 功能 介绍 


在 Prism 控 制 台 主 菜单 的 最 右 侧 是 用 户 菜单 ， 图 标 是 “ 国 时 9” ; 带 有 当前 用 户 的 登录 名 。 点 击 用 户 图 标 ， 可 显示 一 列 选项 ， 包 括 更 新 用 户 账户 、 退 出 Web 控 制 台 以 及 其 他 杂项 任务 选项 。 每 
个 选项 的 详细 描述 参见 表 3-11。 


表 3-11 Nutanix 社 区 版 用 户 菜单 列表 说 明 


名 R fü o X 


更 改 密码 (Change Password) 打开 Change Password 窗口 ， 更 新 当前 登录 用 户 的 密码 
Ff Update Profile 窗口 ， 更 新 当前 登录 用 户 的 名 字 和 电子 邮 
更 新 配置 文件 (Update Profile) iT Ee ee EE 更 新 当前 登录 用 户 的 名 学 和 电子 类 
件 地 址 
MGMT API Explorer (Beta) 弹出 一 个 浏览 夯 窗 口 ， 打 开 集 群 管 理 功能 API N A Ar 
REST API Explorer 弹出 一 个 浏览 各 窗口 ， 打 开 Nutanix REST API Xi) 9i: 
i Cmdlet 安装 程序 (D load Cmdlet 
ana aA Don 点 击 后 下 载 NutanixCmdlets.msi 安装 程序 
Installer ) 
FÆ nCLI (Download nCLI) 点 击 后 下 载 ncli.zip 


FÆ Prism Central (Download Prism Central)| Sita, FRM 4s Avil) Prism Central F z& v1 rfi 


打开 关于 Nutanix 窗口 ， 显 示 当 前 环境 的 Nutanix AOS, NCC 
版 本 信息 以 及 License 信息 


打开 “2048” 游 戏 窗口 ， 用 于 系统 管理 员 等 行 长 时 间 运 行 任务 


关于 Nutanix (About Nutanix ) 


亲眼 无 事 ? (Nothing to do ? ) Wii. HARRERAN. IB RRA, Hu BS pe E 
ff [T4 x 99 
注销 (Sign Out) 注销 当前 用 户 登 录 状 态 ， 从 Prism 控制 台 退 出 


3.4.1.4 创建 存储 容器 操作 


在 第 2 草 中 ， 我 们 已 经 介绍 了 Nutanix 集 群 的 存储 概念 ， 如 存储 池 (Storage Pool) 、 人 存储 容器 (Storage Container) 、 虚 拟 磁盘 (vDisk) 和 对 外 提供 jiSCsl 数 据 服务 的 卷 组 (Volume 
Group) 等 ; 本 节 将 重点 从 操作 角度 来 讲述 如 何在 Nutanix 社 区 版 集群 中 创建 一 个 存储 容器 ， 并 在 后 续 章 节 中 ， 使 用 该 存储 容器 作为 目标 存储 来 上 传 镜像 及 创建 虚拟 机 。 


首先 ， 需 要 登录 到 Prism 控 制 台 ， 在 主 菜单 左 侧 的 “实体 对 象 下 拉 菜 单 ” 的 下 拉 列 表 中 选择 “存储 ” (Storage) ， 跳 转 到 “存储 ”实体 的 操作 窗口 ， 如 图 3-58 所 示 。 


在 存储 实体 操作 窗口 的 窗口 菜单 部 分 ， 左 侧 为 窗口 的 三 种 不 同 视图 页 面 ， 可 以 通过 选择 不 同 的 视图 来 了 解 全 面 的 存储 实体 对 象 的 特性 与 状态 。 右 侧 是 三 个 任务 操作 按钮 ， 分 别 为 创建 存储 容 
器 ， 创 建 卷 组 及 创建 存储 池 。 


在 创建 集群 时 ， 会 自动 生成 一 个 人 存储 池 ，Nutanix 建 议 在 一 个 集群 中 使 用 一 个 仓储 池 容 纳 集群 内 所 有 存储 ， 以 实现 集群 层面 容量 及 IOPs 的 动态 优化 ， 该 配置 适用 于 大 部 分 的 应 用 场景 。 


除了 存储 池 之 外 ， 创 建 集群 时 也 会 自动 创建 一 个 存储 容器 ， 存 储 容器 相当 于 存储 池 中 的 可 用 存储 空间 的 子 集 ， 是 Nutanix 存 储 策略 的 配置 对 象 ， 如 本 书 第 2 章 中 提 到 的 数据 压缩 、 重 复数 据 
删除 、 见 余 因 子 等 都 是 基于 存储 容器 设置 的 。 


一 个 存储 池 可 以 创建 多 个 存储 容器 ， 每 个 存储 容器 可 以 独立 设 定 存储 策略 规则 ， 以 满足 不 同 虚拟 机 对 存储 资源 的 SLA 需 求 。 


存储 事件 


存储 摘要 集群 IDPS BIOPS 存储 严重 警报 
63157 GiB 可 用 ( 物理 ) 659.57 | | | | 
GiB 容量 ( 2 ) ea ove Md mn WIN eM - 
3 Storage Container 集群 ID The 121 KBps 
E. |, 存储 container 安装 在 | 
ME 数据 存储 1 主机 上 — | a eee, CEN 
容量 优化 集群 平均 IO 延迟 2.89 ms FHSAA 
无 容量 优化 TD em. 
"Efe E E Pris ie 
orage age 
3. 08 GIB 3 08 GIB 
LOGICAL YSICAL 


图 3-58 存储 实体 操作 窗口 
容器 将 通过 iSCSI 将 虚拟 磁盘 挂 载 给 虚拟 机 ， 而 Hypervisort 为 


Oe 1. 创 建 存储 容器 之 前 ， 需 要 确认 集群 配置 中 已 设置 好 NTP 服 务 器 ， 并 完成 了 时 间 同 
放 据 处 理 方式 有 所 不 同 ，Nutanix 社 区 版 环境 采用 的 是 Nutanix AHVAE AHypervisor, Hik 2 


2. 存 储 容器 在 不 同 Hypetvisot 的 集群 中 ， 考 Ep, 
vSpehre ESXi 时 ， 存 储 容 器 将 通过 NFS 挂 载 为 DataStore 供 ESXi 主 机 使 用 ，Hyper-V 环 境 下 ， 则 通过 SMB 的 方式 供 主 机 访问 
创建 一 个 新 的 存储 容器 ， 详 细 步 又 如 下 : 
， 点 击 “+ 存 储 容器 ”按钮 ， 打 开 “Create Storage Container” 对 话 框 ， 如 图 3-59 所 示 
择 存储 池 ， 如 需 配 置 更 多 参数 ， 需 要 点 击 “Advanced Setting” 按 钮 展开 高 级 参数 设置 部 
群 默 认 数 据 见 余 因 子 为 2， 在 集群 满足 相应 的 要 求 之 后 可 以 选择 数据 见 余 因子 为 3。 具 体 配置 要 求 可 


1) 在 存储 实体 操作 窗口 菜单 的 右 侧 ， 点 击 
味 着 存储 池 无 法 再 将 这 一 部 分 容量 分 配给 其 他 存储 容器 ， 输 入 数值 小 于 或 等 于 存储 池 的 容 


2) 填写 存储 容器 名 称 (Name) 尘 存 人 
Nutanix AOS 集 群 支持 数据 了 见 余 因子 为 2 或 3 


a) TRAF (Replication Factor) 
参见 后 续 章 节 内 容 。 


b) 预 留 容量 


在 存储 池 中 为 该 存储 容器 的 预 留存 储 空间 ， 预 留 空间 也 就 
存储 容器 分 配给 虚拟 化 层 时 显示 的 存储 容量 ， 也 就 是 存储 容器 可 使 用 的 最 大 存储 容量 ， 虚 拟 化 主机 使 用 时 不 会 超过 该 声明 容量 。 输 入 数值 大 于 或 等 


(Reserved Capacity) 


" 


C) RABE (Advertised Capacity) : 
于 存储 容器 的 预 留 容 量 。 


Enter a name for your storage container and select a storage pool for it. You can 


provision the storage container for all hosts or select individual hosts. 


MAME 


STORAGE POQ 


default-storage-pool-94081981093988 E 


MAX CAPACITY 


631.53 GiB (Physical) Based on storage pool free unreserved capacity 


x Advanced Settings Cancel 


图 3-59 ”创建 存储 容器 对 话 框 


^ eo ; " : = -— 2: em "S ; " 
Qi 虽然 可 以 在 声明 容量 时 ， 输 入 大 于 存储 池 容 量 的 数值 ， 并 且 在 虚拟 化 层 也 能 识别 到 该 声明 容量 数值 ， 但 该 存储 容器 达到 存储 池 实 际 大 小 的 阅 值 时 ， 仍 会 收 到 警报 提示 。 


d) 压缩 (Compression) : 勾 选 该 复 选 框 以 局 用 压缩 。 选 中 该 复 选 框 后 ， 会 出 现 “Delay (In Minutes) ”字段 。 输 入 数值 为 零 时 ， 启 用 在 线 压 缩 ， 输 入 数值 为 若干 (分钟 数 ) ， 以 启用 
写 入 后 处 理 压 缩 ， 在 数据 初始 写 入 后 的 若干 分 钟 后 开始 启动 数据 压缩 ， 如 图 3-60 所 示 。 
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Zt Advanced Settings 


图 3-60 ”存储 容器 高 级 设置 (1) 


Cancel 


e) 重复 数据 删除 (Deduplication) : 勾 选 “CACHE” 复 选 框 可 对 读 取 缓 存 执行 即时 重复 数据 删除 ， 以 优化 性 能 。 勾 选 “CAPACITY” 复 选 框 可 对 持久 数据 执行 处 理 后 重复 数据 删除 。 


Qi 1. 启 用 “CACHE” 时 ，CVM 需 配置 4GB 或 更 高 容量 的 内 存 。 建 议 主要 将 此 特性 用 于 全 克隆 、 持 久 化 桌面 和 物理 到 虚拟 迁移 用 例 。 不 建议 为 VYAAI 克 隆 或 链接 克隆 环境 启用 重复 数 


HEMA; 


2. 启 用 “Capacity ”时 ，CVM 需 配置 32GB 或 更 高 容量 的 内 存 ， 以 及 300GB 的 SSD。 建 议 用 于 需要 节省 存储 容量 (不 只 是 重复 数据 删除 带 来 的 性 能 提升 ) 的 全 克隆 、 持 久 化 桌面 和 物理 到 虚拟 迁 


移 用 例 。 


f) 纠 删 码 (Erasure Coding) : 选中 该 复 选 框 以 启用 纠 删 码 。 纠 删 码 可 增加 集群 上 的 存储 可 用 容量 。 关 于 纠 删 码 的 相关 信息 ， 本 书 第 2 草 中 已 经 提 及 ， 此 处 不 再 袭 述 。 


g) 文件 系统 日 名 单 (Filesystem Whitelists) : 输入 使 用 逗号 分 隔 的 I|P 地 址 和 子 网 掩 码 值 (格式 为 jp_addressnetmask) 。 日 名单 为 一 组 允许 访问 此 存储 容器 的 地 址 。 晶 名单 用 于 拒绝 其 


他 来 源 的 未 经 授权 的 地 址 访问 ， 如 图 3-61 所 示 。 


Os 针对 存储 容器 设置 的 白 名 单 将 履 盖 在 集群 层面 所 设置 的 任何 全 局 白 名 单 。 
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FILESYSTEM WHITELISTS 
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setting a storage container whitelist will override amy global whitelists 
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Zt Advanced Settings 


图 3-61 存储 容器 高 级 设置 (2) 


3 


— 


4 


xo 


5) Œ "Table" (X) 视图 中 ， 可 以 选中 刚 创 建 完成 的 存储 容器 ， 如 需 更 新 该 存储 容器 的 参数 设置 ， 直 接点 击 “Update” 
击 “Delete” 即 可 。 注 意 ! 删除 操作 前 ,一 定 确认 该 存储 容器 中 的 数据 已 经 备份 。 


一 


Cancel 


完成 上 述 所 有 字段 的 填写 之 后 ， 点 击 “Save” 按 钮 保存 ， 如 某 些 字 段 填写 有 误 ， 对 话 框 上 部 会 出 现 红 体 字 提 示 。 如 全 部 填写 正确 ， 集 群 将 创建 该 存储 容器 。 


填写 存储 容器 名 称 (Name) ， 选 择 存 储 池 ， 如 需 配 置 更 多 参数 ， 需 要 点 击 “Advanced Setting” 按 钮 展开 高 级 参数 设置 部 分 。 


(更 新 ) 即 可 ， 如 图 3-62 所 示 。 如 需要 删除 该 存储 容器 ， 点 


Aus - om. searc table Q 
" " LE CACHE CAPACITY ERASURE FRE a MAX CAPACIT.. CONTROLLER CONTROLLER CONTROLLER 
4 NAME RF OMPRES USED | 
DEDUPLICAT DEDUPLICAT CODING (LOGICAL LOPS IO BW IO LATENCY 
default-container- " * " 
1 Off Off Off Off 131.5 GiB 0 GiB 131.5 GiB D O KBps O ms 
94081981093988 
On (60 : - 
Home-Lab 1 in) Off Off Off 6315 GiB 0 GiB 6315 GiB 0 O KBps O ms 
min 
NutanixManagementShare 1 CHT CHT Cit CT 131.5 GiB 3.81 GiB 135.31 GIB o D KBps DO ms 
Prism-Central-CTR 1 Off Off Off Off 131.5 GiB 24.26 GiB 155 76 GiB 5 61KBps 28 ms 


Summary >  Home-Lab 


图 3-62 ”存储 容器 详细 情况 视图 


3.4.1.5 ”镜像 管理 操作 


镜像 管理 主要 是 为 了 集中 管理 Nutanix 集 群 中 的 镜像 资源 ， 如 虚拟 机 操作 系统 镜像 、 驱 动 镜像 ， 或 者 虚拟 机 磁盘 文件 或 其 他 相关 应 用 程序 镜像 。 映 像 配置 只 有 在 Hypervisor 为 Nutanix AHV 
时 才 会 出 现在 任务 操作 菜单 中 ， 在 Nutanix 社 区 版 集群 中 创建 虚拟 机 之 前 ， 需 要 先 将 虚拟 机 操作 系统 镜像 及 相关 的 驱动 镜像 通过 镜像 配置 功能 上 传 到 存储 容器 中 ， 以 供 后 续 创 建 虚拟 机 时 使 用 。 


利用 镜像 服务 特性 ， 能 够 存储 大 量 的 导入 文件 ， 可 在 创建 VM 时 通过 1SO 镜 像 创 建 CD-ROM 或 通过 磁盘 镜像 创建 操作 系统 磁盘 。 镜 像 服务 支持 的 磁盘 格式 有 raw、vhd、vmdk、vdi、iso 和 


qcow2, 
首先 ， 需 要 登录 Prism 控 制 人 台 ， 在 主 菜单 右 侧 的 “配置 菜单 ”的 下 拉 列 表 中 选择 “映像 配置 ” (Image Configuration) , 5&tH "Image Configuration” 对 话 框 ， 如 图 3-63 所 示 。 
在 对 话 框 中 ， 点 击 “+ 上 传 镜 像 ” 按 钮 ， 打 开 “Create Image” 对 话 框 ;完成 如 下 字段 的 填写 操作 : 
1) 输入 镜像 名 称 (Name) 。 
2) 输入 镜像 说 明 ， 该 字段 为 非 必 填 项 。 


3) 在 Image Type 中 ， 通 过 下 拉 列 表 选 择 镜像 类 型 ， 如 1SO 或 DISK。 


管理 用 于 创建 虚拟 磁盘 的 镜 停 . 


No images have been created. 


图 3-63 Image Configuration 3} 14 1E 
4) 选择 镜像 存放 的 可 用 存储 容器 ， 通 过 下 拉 列 表 选 择 上 一 节 新 创建 的 名 为 “Home-Lab” 的 存储 容器 。 
5) Image Source 指 的 是 待 上 传 镜 像 的 来 源 ， 支 持 如 下 两 种 操作 : 


a) 选中 “From URL" , 可 以 导入 来 自 互 联网 的 镜像 ， 输 入 的 字段 格式 如 下 : 


nfs://[hostname|IP addr]/path 
http://[hostname|IP addr]/path 


b) 选中 “Upload a file”， 可 以 从 本 地 工作 站 上 传 镜像 文件 ， 点 击 “Choose File” 打 开本 地 文件 搜索 窗口 ， 选 择 待 上 传 的 文件 ， 如 图 3-64 所 示 。 


HAM 


Window Server 2008 R7 


ANNOTATION 


IMAGE TYPE 


ISO 


STORAGE CONTAINER 


Home-Lab 


IMAGE SOURCE 


From URL 


© Upload a file Choose File | cn. windows se. vd 61/396so 


返回 


6) 正确 填写 完 所 有 字段 之 后 ， 点 击 “Save” 按 钮 保存 ， 窗 口 会 显示 上 传 进度 。 


7) 等 待 上 传 完成 后 ， 映 像 配 置 窗口 会 显示 完成 上 传 的 镜像 清单 ， 等 待 该 镜像 状态 变 大 


管理 用 于 创建 虚拟 磁盘 的 镜像 。 


+ HERR 


Window Server 2008... 


图 3-64 Create Image 3} 46 1E 


图 3-65 Image List] 3& 3E 


ISO 


"Active" 之 后 ， 该 镜像 资源 变 为 可 用 ， 如 图 3-65 所 示 。 


ACTIVE 


3.4.1.6 创建 虚拟 机 操作 


在 Nutanix 社 区 版 集群 中 ， 可 以 直接 使 用 Prism 控 制 台 创建 新 的 虚拟 机 ， 在 创建 虚拟 机 的 过 程 中 ， 可 以 直接 配置 虚拟 机 的 所 有 组 件 资源 ， 如 vCPU、 内 存 、 磁 盘 等 。 创 建 虚拟 机 操作 步骤 如 


F: 


1) 需要 登录 到 Prism 控 制 台 ， 在 主 菜单 左 侧 的 “ 


实体 对 象 下 拉 菜 单 ” 的 下 拉 列 表 中 选择 “虚拟 机 


(VM) ， 跳 转 到 “虚拟 机 ”实体 的 操作 页 面 ， 如 图 3-66 所 示 。 
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图 3-66 ”虚拟 机 操作 页 面 


“+ 创建 VM” 按钮 ， 打 开 “Create VM” 对 话 框 ， 如 图 3-67、 图 3-68 和 图 3-69 所 示 。 


General Configuration 


NAME 
AD Server-Windows Server 2008 R2 


DESCRIPTION 


使 用 此 VM TEAME VM 


Compute Details 


VC PUITS) 


NUMBER OF CORES PER VCPU 


MEMORY 


Cancel 


图 3-67 Create VM 窗口 (1) 


GIB 


Disks + Add New Disk 


CD-ROM EMF T Y-true; BUS=ide Fo N 


Volume Groups 


Network Adapters (NIC) 


You haven't added any NICs yet 


Add New NIC 


Cancel 


图 3-68 Create VM 窗口 (2) 


Network Adapters (MIC) 


You haven't added anv NICs vet 


VM Host Affinity 


Custom Seript 


Cancel 


图 3-69 Create VM 窗口 (3) 
3) 在 指定 字段 中 执行 以 下 操作 : 
a) 虚拟 机 名 称 (Name) : 输入 VM 名 称 。 
b) EHHA (Description) : 可 选 的 填写 项 ， 用 于 输入 VM 说 明 。 
c) 虚拟 CPU 数量 (vCPU (s) ) : 输入 要 分 配 到 此 VM 的 虚拟 CPU 数量 。 
d) 虚拟 CPU 核 数 (Number of Cores per vCPU) : 输入 分 配给 各 虚拟 CPU 的 核心 数 。 
e) 虚拟 机 内 存 (Memory) : 输入 要 分 配给 该 VM 的 内 存 容量 (以 GiB 为 单位 ) 。 
4) 为 虚拟 机 添加 磁盘 ， 点 击 “Add New Disk” 按 钮 。 将 显示 “添加 磁盘 ”对 话 框 见 图 3-70。 完 成 下 列 字段 的 填写 : 
a) 从 下 拉 列 表 中 选择 存储 设备 类 型 (DISK 或 CD-ROM) 。 以 下 字段 和 选项 因 你 选择 的 是 DISK 还 是 CDROM 而 有 所 不 同 。 
b) 从 下 拉 列 表 中 指定 设备 内 容 。 


i. 选 择 Clone from ADSF file 以 复制 集群 中 可 用 作 磁 盘 镜 像 的 任何 文件 。 


| ee on Storage Container p 
-— — 
— 


Cancel 


图 3-70 Add Disk 对 话 杠 
ii. 选择 Empty CD-ROM 以 创建 空 的 CD-ROM 设 备 。 (只 有 在 上 一 个 字段 中 已 选择 了 CD-ROM 时 ， 才 会 显示 该 选项 。) 如 果 要 通过 CD-ROM 提 供 系统 镜像 ， 则 需 使 用 CD-ROM 设 备 。 


让 .选择 Allocate on Storage Container 以 在 不 指定 镜像 的 情况 下 分 配 空间 。 (只 有 在 前 一 个 字段 中 已 选择 了 “DISK” 后 ， 才 会 显示 该 选项 。) 选择 该 选项 仪表 示 你 正在 分 配 空间 。 随 后 ， 
必须 通过 CD-ROM 或 其 他 来 源 提供 系统 镜像 。 


iv. 选 择 Clone from Image service 以 复制 已 通过 镜像 服务 特性 导入 到 磁盘 的 镜像 。 
c) 从 下 拉 列 表 中 选择 总 线 类 型 (Bus Type) 。 选 项 为 IDE、3CsSI 或 SATA。 


d) 输入 所 需 系统 镜像 的 路 径 (ADSF Path) ; 只 有 在 已 选择 了 Clone from ADSF file 时 ， 才 会 显示 该 字段 。 输 入 路 径 名 称 ， 如 /storage_container_ nameyViso_name.iso。 输 入 存储 容器 名 
称 (/storage_container_name/) 后 ,将 显示 该 存储 容器 中 的 ISO 文 件 列 表 。 


e) 选择 已 通过 镜像 服务 特性 创建 的 镜像 (Image) ; 只 有 在 已 选择 了 Clone from Image Service 时 ， 才 会 显示 该 字段 。 将 指定 要 复制 的 镜像 。 

f) Storage Container: 从 下 拉 列 表 选 择 要 使 用 的 存储 container。 只 有 在 已 选择 了 Allocate on Storage Container 时 ， 才 会 显示 该 字段 。 该 列表 中 包括 针对 该 集群 创建 的 所 有 存储 容器 。 
g) 输入 磁盘 大 小 (Size) (以 GiB 为 单位 ) 。 

h) 如 果 所 有 字段 条 目 都 正确 ， 点 击 Add 按 钮 ， 将 磁盘 和 CD-ROM 添 加 到 虚拟 机 并 返回 到 Create VM 对 话 框 。 

i) 重复 以 上 步骤 ， 可 为 虚拟 机 添加 更 多 磁盘 或 CD-ROM 设 备 。 


5) 为 虚拟 机 添加 磁盘 之 后 ， 编 辑 现 有 的 CD-ROM， 添加 虚拟 机 操作 系统 镜像 ， 如 图 3-71 和 图 3-72 所 示 。 


Disks + Add New Disk 


CD-ROM EMPT Y-true; BUS-ide A. 


图 3-71 编辑 CD-ROM 


6) 完成 虚拟 机 操作 系统 镜像 添加 之 后 ， 添 加 一 个 新 的 CD-ROM 用 于 挂 载 Windows 操 作 系 统 的 驱动 镜像 ， 如 图 3-73 所 示 。 


CD-ROM =A. 


Clone from Image Service 
BUS TYPE 


Window Server 2008 R2 ^ 


Cancel 


图 3-72 Update Disk 对 话 框 
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图 3-73 ”添加 CD-ROM 对 话 框 
T) 添加 虚拟 机 网 卡 ， 如 图 3-74 所 示 。 
a) 在 “VLAN Name” 的 下 拉 列 表 中 选择 目标 虚拟 LAN; 列表 包括 所 有 已 定义 的 网 络 。 
b) 如 VLAN Name 的 下 拉 列 表 中 无 可 用 的 选项 ， 可 参见 3.4.5 节 中 创建 网 络 (Create Network) 部 分 ,创建 一 个 新 的 网 络 。 
c) 如 果 所 有 字段 条 目 都 正确 ， 点 击 “Add” 按 钮 ， 为 虚拟 机 创建 网 络 接口 并 返回 到 “Create VM" 对话 框 。 
d) 重复 此 步骤 ， 向 虚拟 机 添加 更 多 网 络 接口 。 
8) 配置 该 虚拟 机 与 主机 的 关联 策略 ， 点 击 “Set Affinity”， 弹 出 Set VM Host Affinity 对 话 框 ， 如 图 3-75 所 示 。 


a) 选择 要 在 哪 台 主机 上 为 虚拟 机 配置 天 联 策 略 。 


Cancel 
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图 3-74 Create NIC ATE FE 
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Select more than one host to ensure that the VM can be run even If there 
s a node fallure 


MTNX-Bc4n5ba4-A 


Close 
图 3-75 Set VM Host Affinity 对 话 框 
b) 点 击 Save， 保存 关联 策略 ， 如 图 3-76 所 示 。 
VM Host Affinity + Set Affinity 
NTNX-ScAabba4-A X 


图 3-76 VM Host Affinity A 


c) 已 选 主机 将 列 出 。 此 配置 具有 永久 性 。 即 使 友 生 HA 事件 ， 虚 拟 机 也 不 会 从 该 主机 移 走 ，VM 一 旦 开机 即 生效 。 


9) 虚拟 机 闪存 模式 (Enable VM Flash) ， 可 供 管 理 员 为 某 些 延 迟 敏感 型 的 天 键 型 应 用 或 虚拟 机 设置 存储 层 优先 (将 虚拟 机 放置 到 SSD 层 ) 。 例 如 ， 一 个 集群 运行 关键 任务 应 用 (例如 SQL 
数据 库 ) 的 工作 负载 较 大 ， 如 不 启用 虚拟 机 闪存 模式 ， 可 能 会 因 其 他 的 工作 负载 ， 导 致 关键 任务 应 用 无 法 把 热点 数据 全 部 放 入 SSD 分 层 ( 热 数 据 层 ) ， 而 被 迁 入 HDD 分 层 ( 冷 数据 层 ) ， 可 能 严 
影响 关键 任务 应 用 的 读 写 性 能 。 


O- 1. 在 默认 情况 下 ， 整 个 集群 25% 的 SSD 资 源 可 用 于 虚拟 机 的 闪存 模式 。 启 用 了 此 特性 的 虚拟 机 数据 会 写 入 SSD 分 层 。 不 管 其 他 禁用 闪存 模式 的 VM 的 数据 用 量 或 热度 如 何 ， 该 虚拟 
机 在 SSD 分 层 中 的 数据 都 不 向 下 迁移 。 如 果 缓 存 数据 超出 SSD 用 量 的 25%， 即 使 VM 开启 了 闪存 模式 ， 系 统 也 会 向 下 迁移 数据 。 
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10) 完成 上 述 所 有 操作 之 后 ， 点 击 “Save”， 提 交 虚 拟 机 创建 任务 。 等 待 任务 完成 之 后 ， 就 可 以 在 虚拟 机 操作 页 面 看 到 刚 创 建 好 的 虚拟 机 ， 如 图 3-77 所 示 。 


«uoc Xm 

4 VMNAME HOST 
NTNX- 

^? NTNX-9c4a5ba4-A-CVM 
Oc4a5ba4-A 

. NTNX- 

® Prism-Central 

O9c4Aa5ba4-A 


@ Windows Server 2008 R2 


Summary » Windows Server 2008 R2 


VM DETAILS 


IP 
ADDRESSES 


192 168... 


192 168... 


VM Performance 


CORES MEMORY CAPACITY 
2 16 GiB 
4 12 GiB 
2 2GiB 


Manage Guest Tools 


Virtual Disks 


STORAGE CPU CONTROLLER CONTROLLER CONTROLLER IO 

Es USAGE READ IOPS WRITE IOPS BANDWIDTH 

-/O GIB 16.04% 0 0 O KBps 
20.34 GiB / 

] 3.19% 0 9 121 KBps 
570.01 GiB 
318 GiB / 5318 

_ 0% - - - 
GiB 

Take Snapshot 
VM NICs VM Snapshots VM Tasks 


图 3-77 虚拟 机 开机 


Include Controller VMs - 3VM - 


Tm. search in table Q 
CONTROLLER AVG IO - FLASH 
LATENCY PACKU- — wope 
O ms No ? No 
2.38 ms Yes No 
- Yes No 
Clone # Update X Delete 
IO Metrics Console 


11) 选中 刚 创建 的 虚拟 机 ， 点 击 虚 拟 机 操作 菜单 中 “Power On” 上 电 开 机 ， 等 待 虚拟 机 状态 变 为 运行 状态 ， 点 击 虚 拟 机 操作 菜单 中 的 “Launch Console" ， 打 开 虚 拟 机 控制 台 窗口 ， 如 


图 3-78 所 示 。 


4 VM NAME HOST 
NTNX- 
^? NTNX-9c4a5ba4-A-CVM 
9c4a5ba4-A 
@ Prism-Central 
NTNX- 
— Windows Server 2008 R2 
9c4a5ba4-A 


Summary > Windows Server 2008 R2 


IP 


ADDRESSES 


192 168... 


12) 弹出 虚拟 机 控制 台 后 ， 可 以 直接 按照 屏幕 提示 ， 


CORES MEMORY CAPACITY 
2 16 GiB 
4 12 GiB 
2 2 GiB 


Manage Guest Tools 


选择 Windows Server 2008 R2 操 作 系 统 的 安装 


STORAGE CPU CONTROLLER CONTROLLER CONTROLLER IO 
USAGE READ IOPS WRITE IOPS BANDWIDTH 
-/ 0 GIB 3116% 0 0 O KBps 
20.51 GiB / 
_ 0% 0 0 O KBps 
570.01 GiB 
318 GiB / 5318 
: 12.1956 3314 o 6.63 MBps 
GIB 
Power Off Actions Take Snapshot Migrate Pause 


图 3-78 ”打开 虚拟 机 控制 台 


i 五 圭 


TAS. 


Include Controller VMs - 3VM - 


安装 方式 等 ， 如 图 3-79 所 示 。 


- Oe - 


CONTROLLER AVG IO 


search in table 


Latency BACU: 

Oms No ? 
Oms Yes 
005 ms Yes 
Clone # Update 


No 


No 


A Not secure | beeps:// - 9440/console/lib/noVNC/vnc auto.html?path-vnc/vm/1e26d /cf-5f9 / -496e-bÜef-« 


Connected (encrypted) to: WIndows Server 2008 R2 z Oo (5 


T 3735 windows 


Windows Server 2008 


Pete Sd. ESCDMEERECTIS -| 


fi Jes eel: ee pe" sete 
og B 


i " -— 
i "ni 


n LOL EE Microsoft Corporation. BATA bU. 


图 3-79 ”虚拟 机 控制 台 界 面 
13) 安装 过 程 进行 到 选择 驱动 器 时 ， 会 发 现 无 可 用 驱动 器 ， 如 图 3-80 所 示 ， 需 要 按照 如 下 步骤 完成 磁盘 驱动 加 载 ， 识 别 驱 动 器 资源 。 
a) 选择 “加 载 驱动 程序 (L) ”， 弹 出 “加 载 驱动 程序 ”对 话 框 ， 选 择 “浏览 ”， 如 图 3-81 所 示 。 


b) 弹出 “浏览 文件 来 ”对 话 框 ， 选 择 创建 虚拟 机 时 所 添加 的 “Nutanix VirtlO" 驱动 镜像 ， 依 次 展开 到 “Windows Server 2008 R2/amd64" 文件 夹 ， 选 定 后 ， 上 点击“ 确定 ”， 如 图 3-82 
PAZ. 


c) Windows 操 作 系 统 安装 向 导 会 自动 列 出 所 兼容 的 驱动 程序 ， 选 中 “Nutanix VirtlO SCSI pass-through controller" 后， 点 击 “ 下 一 步 ”， 如 图 3-83 所 示 。 


d) 系统 会 自动 加 载 磁盘 驱动 ， 驱 动 加 载 完 成 后 操作 系统 安装 器 将 自动 跳 转 到 选择 安装 目标 磁盘 的 对 话 框 ， 选 定好 系统 安装 的 磁盘 之 后 ， 点 击 “ 下 一 步 ”， 系 统 将 进入 文件 复制 阶段 ， 后 续 
步骤 按照 屏幕 提示 操作 即 可 ， 如 图 3-84 所 示 。 


A Not secure | beeps:// :9440/console/lib/noVNC/vnc auto.html?path-vnc/vm/1e26d /cf-5f9 /-496e-b0ef-« 


Connected (encrypted) to: WIndows Server 2008 R2 


him Wh S A 


您 想 将 Windows 3zSETEdUp AB? 


PET 驱动 器 选项 GSB) QU 
全 加 载 驱动 程序 co 


启示 找到 任何 驱动 缉 。 Hih “MRE” ERATARA A ETNE ° 


1 收集 信息 2 安装 Windows 


加 载 驱 动 程序 =] 
SSPE EE a e E E SERE ME 
体 ， 然后 单 击 “确定 ”。 


TE. Soap oye ep + CD. ti USE TFS ans ° 


[3o || We j| HH | 


图 3-81 浏览 驱动 程序 


wea FP mx) 
浏 宙 驱动 三 序 ， 党 后 单 击 ” 请 定 ” 


m VE " 
“3 CD 驱动 器 (m:) GRMSXVOL CH DVT 
日 2 CD 驱 动 器 (ED) Hutanix VirtIO 1.1.1 

|) Windows 10 

Ji Windows T 

9" Windows 6 s 

|) Windows 8.1 

[-] 9" Windows Server 200G R2 
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请 十 取消 


图 3-82 ”选择 驱动 文件 所 在 路 径 


| Q 局 安装 Windows 


选择 要 安 洪 的 驱动 程序 。 


Hutanix VirtIO Balloon Driver (E:\Windows Server 2008 Re \amdb4 balloon. inf] 
Hutanix VirtI0 Ethernet Adapter (E: Windows Server 2008 Re \amdb4inethom. inf] 
Hutanix VirtIO SCSI pass-through controller (E:*Windows Server 2008 RP \amdb4iwiosesi. i: 
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Soe) | 


E]3-83 ”选择 磁盘 驱动 


| € 局 2% Windows 


ARABIA Windows 安装 在 何 处 3 
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图 3-84 ”选择 系统 安装 的 目标 磁盘 


14) 等 待 系统 安装 完毕 ， 设 置 好 新 密码 ， 进 入 操作 系统 后 ， 就 可 以 安装 Nutanix Guest Tools， 回 到 Prism 控 制 台 的 虚拟 机 实体 页 面 ， 选 定 刚 完成 操作 系统 安装 的 虚拟 机 ， 点 击 “Manage 
Guest Tools”， 弹 出 “Manage VM Guest Tools” 对 话 框 ， 如 图 3-85 所 示 。 


15) @iz "Enable Nutanix Guest Tools" Ja, 2&7 "Mount Nutanix Guest Tools" #0 "Enable Application" Wmm, W% “Mount Nutanix Guest Tools” 时 ， 对 话 框 会 出 


Ji "Guest Tools cannot be mounted as there not enough empty CD-ROM (s) ”提示 ， 是 因为 我 们 在 创建 虚拟 机 时 ， 为 所 有 CD-ROM 挂 载 了 镜像 ， 导 致 Nutanix Guest Tools 无 法 挂 
载 ， 可 直接 点 击 “ 解 除 当 前 ISO 挂 载 ” ， 后 台 会 自动 卸载 一 个 CD-ROM 所 挂 载 的 镜像 后 ， 再 挂 载 Nutanix Guest Tools， 如 图 3-86 至 图 3-88 所 示 。 


EB Include Controller VMs - 2 VM (filtered from 3) me Q 
m P T MEMORY De E CPU CONTROLLER CONTROLLER CONTROLLER IO CONTROLLER AVG 7 FLASH 
4 VM NAME HOS __ CORES E 5 STORAGE : Lu ke : Ó BACK is 
ADDRESSE CAPACITY USAGE READ IOPS WRITE IOPS BANDWIDTH IO LATENCY MODE 
. . 20.51 GiB / 
@ Prism-Central 4 12 GiB ] 096 - - - - Yes No 
570.01 GiB 
— Windows Server 2008 NTNX- i 10.04 GiB / 
2 2 GiB i 2.32% 0 0 O KBps Oms Yes No 
R2 9c4a5ba4-A 53.18 GiB 
Summary > Windows Server 2008 R2 3] e Take ! ite Pause e d 二 X Delet 


图 3-85 管理 虚拟 机 Guest Tools 


Please select the guest tool 


Enable Nutanix Guest Tools 


Cancel 


图 3-86 Manage VM Guest Tools 3} tE 4E 


Please select the guest tool 


Enable Nutanix Guest Tools 


[ ] Mount Nutanix Guest Tools 


ENABLE APPLK ATIONS 


图 3-87 Mount Nutanix Guest Tools (1) 


16) mih "Submit" ， 提 交 挂 载 Nutanix Guest Tools 的 任务 ， 如 图 3-89 所 示 。 


Guest Took cannot be mounted as there not enough empty CD-ROM(s) x 


Please select the guest tool 
Enable Mutanix Guest Tools 


m Mount Nutanix Guest Tools 


ENABLE APPLICATIONS 


| | m If a = | ta ES ec, | P | tL | 


| I g T un C x z = mia | - z i z ya 7 m: clin "E " z x b- m og = C E - Las LÀ | - [a u 


Cancel 


图 3-88 Mount Nutanix Guest Tools (2) 


Please select the guest tool 


Enable Mutanix Guest Tools 


Mount NMutanix Guest Tools 


ENABLE APPLK A TIONS 


Cancel 


图 3-89 3€ x Mount Nutanix Guest Tools 任 务 


R € à J- X É ? S p > ke wie 
Qs 1.Self Service Restore， 自 助 恢复 (也 称 为 文件 级 别 恢 复 ) 特性 支持 虚拟 机 管理 员 从 Nutanix 数 据 保 护 快照 执行 自助 恢复 ， 而 尽 可 能 减少 管理 员 操 作 。 


2.Volume Snapshot Service (VSS) /Application Consistent Snapshots，Nutanix 原 生 的 客户 虚拟 机 内 VmQuiesced 快 照 服务 (VSS) 代理 将 对 支持 VSS 的 所 有 VM 执行 应 用 程序 一 致 性 快照 。 该 机 制 
在 不 中 断 〈 临 时 中 断 VM 响 应 ) 任何 VM 的 情况 下 执行 应 用 一 致 性 快照 ， 并 支持 CommVault 和 Rubrik 等 第 三 方 备份 软件 供应 商 ， 以 在 Nutanix 平 台 上 以 与 庚 拟 化 层 无 关 (hypervisor-agnostic) 的 方式 执 
行 应 用 一 致 性 快照 。 


3. 点 击 Submit 之 后 ， 可 能 出 现 如 图 3-90 所 示 的 “Cluster external ip is not configured” 的 错误 提示 ; 这 是 因为 之 前 为 配置 集群 外 部 IP 地 址 ， 可 以 参照 3.3.3.2 节 内 容 添加 外 部 IP 地 址 后 ， 再 挂 载 


Nutanix Guest Tools. 


图 3-90 cluster external ip is not configured#é zr 


17) 切换 回 虚 拟 机 控制 台 ， 会 发 现 虚拟 机 操作 系统 中 弹出 了 Nutanix_Tools 安 六 提示 ， 点 击 “ 运 行 Setup.exe”， 进 入 Nutanix Guest Toos kRAS, &nE3-9130Ed3-92Bfrzn. 


=/5) x} 


CD 驱动 器 (-) NUTANIX TOOLS 
E 


[ $9537 软件 和 游戏 执行 此 操作 


NAb SERA 


ea kon 
| tT AOR 


An 


dows 


"a 3 a | | | hà ail 
mU. ELI LE 


- : a| ] 
EF... == - " T ‘of b M mm mm T. 
it imm  HlBEIEHSC RH 


Hutaniz Guest Tools Setup E | f | 口 | x] 
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ANIX END USER LICENSE . 


X 
IMPORTANT - READ CAREFULLY 


READ THIS END USER LICENSE 

AGREEMENT (THE "AGREEMENT") BEFORE 

DOWNLOADING, INSTALLING, COPTING, 

CONFIGURING, ACCESSING, DEPLOYING, 

USING NUTANIX SUPPORT AND/OR USING 

IHE SOFIWARE. BY DOWNLOADING, 

INSTALLING, COPYING, CONFIGURING, 
CESSING, DEPLOYING, USING NUTANTX 

SUPPORT AND/OR OTHERWISE USING ALL 

OR ANYPART OF IHE SOFIWARE OR BY ha 


Iv 1 agree to the license terms and conditions 


Install | Close 


18) 按照 安装 向 导 提示 ， 完 成 Nutanix Guest Tools 安 装 ， 至 此 ， 虚 拟 机 的 部 署 全 部 完成 ， 可 以 继续 选择 配置 应 用 系统 所 要 求 的 操作 系统 其 他 设置 了 。 


图 3-92 Nutanix Guest Tools 安 装 向 导 


3.4.2 ” 目 助 服务 门户 操作 
自助 服务 门户 (Self Service Portal, SSP) 是 Nutanix 社 区 版 自 带 的 虚拟 机 生命 周期 管理 的 多 租户 云 资 源 门户 ， 可 以 为 基于 AHV 环 境 的 用 户 提供 轻 量 级 的 多 租户 云 门户 系统 ， 适 用 于 企业 IT 
环境 中 的 开发 测试 环境 中 对 虚拟 机 的 生命 周期 管理 场景 。 


SSP 是 Nutanix AOS 的 一 部 分 ， 截 至 写作 本 书 之 时 ，SSP 要 求 Hypervisor 必 须 为 AHV， 为 单个 AHV 集 群 实现 多 租户 云 资源 门户 功能 。 链 接 到 SSP 的 活动 目录 服务 (AD) 中 的 用 户 可 以 使 用 各 
自 的 认证 凭证 访问 到 SSP 中 各 自 对 应 的 门户 页 面 。Prism 管 理 员 可 以 委派 AD 中 的 某 个 用 户 作为 SSP 管 理 员 。SSP 管 理 员 可 以 为 最 终 用 户 创建 并 管理 对 应 的 自 服务 项 目 以 及 设置 该 用 户 的 权限 ， 还 
可 以 设置 资源 使 用 配额 ， 管 理 服务 目录 (Catalog) 中 虚拟 机 模板 或 镜像 。 


Os Prism 控 制 台 管理 员 账 户 也 是 SSP 的 默认 管理 员 账 户 。 

被 设置 为 某 个 SSP 自 服务 项 目的 AD 的 用 户 可 以 登录 到 该 用 户 授权 的 门户 ， 管 理 授权 项 目 中 的 虚拟 机 资源 。 

SSP 可 以 为 管理 员 提供 目前 集群 环境 中 资源 使 用 情况 的 展现 ， 如 每 个 项 目的 资源 使 用 ， 以 及 对 应 项 目 中 的 虚拟 机 和 该 项 目的 用 户 情况 。 
3.4.2.1 初始 化 SSP 

SSP 作 为 Nutanix AOS 的 一 部 分 ， 无 须 额外 安装 功能 组 件 ， 即 可 直接 配置 使 用 。 本 节 将 针对 Nutanix 社 区 版 中 SSP 的 配置 进行 详细 讲述 。 

可 以 通过 如 下 两 种 方法 打开 SSP: 

: 通过 Prism 控 制 台 打开 。 

- 在 浏览 器 中 输入 https://cvm_ip: 9440/ssp/， 登 录 到 SSP。 

O.z 第 一 次 访问 SSP 时 ， 需 要 使 用 Prism 控 制 台 管 理 员 admin 账 户 进行 初始 配置 。 


如 下 过 程 是 通过 Prism 控 制 台 直 接 打开 的 方式 对 SSP 进 行 配置 。 在 正式 开始 配置 之 前 ， 需 要 准备 好 环境 中 的 活动 目录 服务 (AD) ， 并 创建 如 下 组 及 用 户 ， 以 便 配置 SSP 使 用 ， 如 图 3-93 所 


& sspadmin 用 户 Nutanix Self-Service Portal AD Admin 


2 WangGang RP Nutanix Self-Service Portal AD Admin User 
SSPAdmins 安全 组 - 本 地 域  Nutanix Self-Service Portal Admin Group 

& CRM Team 安全 组 - 全 局 Nutanix Self-Service Portal CRM Team Group 

六 HanMei 用 户 Nutanix Self-Service Portal CRM Team User 

2 LiMing 用 户 Nutanix Self-Service Portal Project User 

& ZhangSan 用 户 Nutanix Self-Service Portal Project User 

HÀ, sspusers 安全 组 - 全 局 Nutanix Self-Service Portal Users Group 


图 3-93 SSP ADA P 3 


1) ExPrismiztblerz Jm, ATES "EAR MUS" , TAE PARKRA ADRA" , 会 弹出 新 的 浏 吃 器 窗口 访问 SSP， 如 图 3-94 所 示 。 
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图 3-94 ”通过 Prism 控 制 台 访问 SSP 
2) 第 一 次 打开 SSP， 即 进入 SSP 的 配置 页 面 ， 需 要 完成 如 下 信息 的 填写 。 


a) 如 果 已 完成 了 Prism 控 制 台 身 份 认证 信息 (AD) 的 填写 ， 则 直接 在 “Select Directory Service” 下 拉 清 单 中 选择 用 于 SSP 的 活动 目录 服务 (AD) 连接 。 如 果 用 于 SSP 的 活动 目录 服务 
(AD) 连接 未 被 列 出 ， 需 要 在 Prism 控 制 台 使 用 身份 认证 菜单 添加 对 应 的 AD 连接 。 


b) 如 果 未 配置 Prism 控 制 台 的 身份 认证 信息 ， 那 么 需要 在 Setup Directory Service 页 面 中 填写 用 于 SSP 的 AD 连接 的 名 称 (Name) 、 域 (Domain) 、 域 目录 URL (Directory URL) 和 连 
Z% (Connection Type) 如 图 3-95 所 示 。 


192.158.1.202:9440/ssp 


t Connect to Directory service Designate Users as Self-Service Administrators 


Welcome to Prism Self Service 


This wizard will help you get started by setting up your system. You need to set your 


directory service first and then assign an admin to manage it. 


Setup Directory service 


Enter the Directory service (LDAP) from where users will be populated into this application. 
Currently it can only be connected to one Directory service. 


NAME 
| Name | 
DOMAIN 

e.g. eng.company.com | 
DIRECTORY URL 
| e.g. Idap/10.1.4 11:389 | 


Only your domain will be saved, not the domain controller. 


CONNECTION TYPE 


| ACTIVE DIRECTORY 


Credentials 


We need to query your company's active directory for details of users. Ideally a service 
account with no time limit should be used. 


图 3-95 Setup Directory Service’ 7 
3) 填写 完 Directory service 信息 之 后 ， 需 要 提供 活动 目录 服务 (AD) 的 凭证 信息 ， 以 将 SSP 加 入 AD， 如 图 3-96 所 示 。 


4) 正确 填写 AD 信息 后 ， 点 击 “Next” ; 跳 转 到 分 配 Prism Self-Service 管 理 员 (Assign Prism Self-Service Admin) 窗口 ， 点 击 “+Add User" ， 输 入 域 的 用 于 SSP 管 理 员 的 组 ， 
如 “SSPAdmins”， 如 图 3-97 所 示 。 


a Connect to Directory service Designate Users as Self-Service Administrators 


Welcome to Prism Self Service 


This wizard will help you get started by setting up your system. You need to set your directory 


service first and then assign an admin to manage it. 
Setup Directory service 


Enter the Directory service (LDAP) from where users will be populated into this application. 
Currently it can only be connected to one Directory service. 


MAME 

DOMAIN 

| nina com | 
DIRECTORY URL 

| Idap-//192 168.1.210:389 | 
Only your domain will be saved, not the domain controller. 

CONNECTION TYPE 


| ACTIVE. DIRECTORY | 


Credentials 


We need to query your company's active directory for details of users. Ideally a service account 
with no time limit should be used. 


USERNAME 
| administatorantnx com | 
PASSWORD 
| IIIIIIITII] | 


图 3-96 Credentials 4 Aj 2 


5) 完成 SSP 管 理 员 分 配 之 后 ， 点 击 “Save” (保存 ) ， 初 始 配置 完成 之 后 ， 直 接 以 Prism 控 制 台 的 管理 员 Admin 身 份 进 入 SSP 首 页 ， 如 图 3-98 所 示 。 


3.4.2.2 ”更 新 SSP 管 理 员 


初始 化 SSP 配 置 之 后 ， 仍 可 以 通过 Prism 控 制 台 管 理 员 Admin 账 号 登录 到 自助 服务 门户 之 后 ， 更 新 SSP 管 理 员 配置 。 

详细 步骤 如 下 : 

1) 使 用 管理 员 账 号 Admin 登 录 SsSP， 点 击 首页 主 菜单 最 右 侧 用 户 菜单 ， 从 下 拉 菜 单 中 选择 “Update Self-Service Administrators”， 如 图 3-99 所 示 。 

2) 弹出 更 新 SSP 管 理 员 的 窗口 ， 首 先 需要 填写 活动 目录 服务 (AD) 的 凭证 信息 ， 然 后 点 击 “+Add User”， 在 新 出 现 的 对 话 框 中 输入 新 增 的 用 户 名 或 组 名 ， 选 定 后 ， 点 击 “Save” 保存， 


如 图 3-100 至 图 3-102 所 示 。 


© Connect to Directory service e Designate Users as Self-Service Administrators 


Designate Users as Self-Service Administrators 


From the directory service you selected, designate a user or a group of users as self-service 
administrators. 


Selfservice administrators create and maintain projects and perform associated management 
tasks. Importantly, self-service administrators have full access to all the VMs in the cluster, and 
they can manage VMs created by Prism administrators even if they do not have administrative 
access to Prism. We strongly recommend that you read about the self-service administrator s 
role and their privileges in the Self-Service Portal Administration Guide on the Nutanix support 
portal. 


Administrators 


+ Add User 
NAME ACTIONS 
5SPAdmins (group) F-X 


Previous 


图 3-97 ”分配 SSP 管 理 员 窗口 


Entities 


VMs 
Containers 
Projects 
Roles 

Users 
Catalog Items 


Images 


Entities 


VMs 
Containers 
Projects 


Roles 


lil 


3 Total VMs 


Prism-Central 


Power State 
IP Addresses 
Project 
Owner 


3 Total VMs 


| Windows Server 2008 R2 
i Of Power State Go On 
- IP Addresses 192.168.1140 
Project 
Owner 


图 3-98 SSP 首 页 


图 3-99 Update Self-Service Administrators 菜单 


Sot + Group v [5 T Alters 


1-3of3 ~ 


[] Windows Server 2012 R2 


Power State Qo On 
IP Addresses 192 168 1.210 
Project 
Owner 


Update Self-Service Administrators 


Docker Registry 


About Nutanix 


Sign Out 


Credentials 


We need to query your company's active directory for details of users. Ideally a 


senyce account with no time limit should be used. 
USERNAME 


administrator £ntnx.com 


PASSWORD 


Designate Users as Self-Service Administrators 


From the directory service you selected, designate a user or a group of users as self- 


Service administrators. 


Selfservice administrators create and maintain projects and perform associated 
Management tasks. Importantly, self-service administrators have full access to all the 
VMs in the cluster, and they can manage VMs created by Prism administrators even if 
they do not have administrative access to Prism. We strongly recommend that you 
read about the self-senace administrators role and their privileges in the Self-Service 


Portal Administration Guide on the Nutanix support portal. 


Administrators 


图 3-100 Update Self-Service Administrators’ v. (1) 


Designate Users as Self-Service Administrators 


From the directory service you selected, designate a user or a group of users as self- 


service administrators. 


Self-service administrators create and maintain projects and perform associated 
Management tasks. Importantly, self-service administrators have full access to all the 
VMs in the cluster, and they can manage VMs created by Prism administrators even if 
they do not have administrative access to Prism. We strongly recommend that you 
read about the self-service administrator's role and their privileges in the Self-Service 


Portal Administration Guide on the Nutanix support portal. 


Administrators 


Save - Cancel 


SSPAdmins (group) 2 members 
sspusers (group) 2 members 
sspadmin sspacdmini&ntnx.com SSPAdmins 


Cancel 


图 3-101 Update Self-Service Administrators # v (2) 


Designate Users as Self-Service Administrators 


From the directory service you selected, designate a user or a group of users as self- 
service administrators. 


Selfservice administrators create and maintain projects and perform associated 
Management tasks. Importantly, self-service administrators have full access to all the 
VMs in the cluster, and they can manage VMs created by Prism administrators even if 
they do not have administrative access to Prism. We strongly recommend that you 
read about the self-service administrator's role and their privileges in the Self-Service 


Portal Administration Guide on the Mutanix support portal. 


Administrators 
+ Add User 
SSPAdmins F.x 
sspusers (group) FKF-Xx 


图 3-102 Update Self-Service Administrators v (3) 


3) 等 待 任务 完成 之 后 ， 在 SSP 主 页 最 左 侧 的 实体 菜单 中 ， 点 击 “Users” ， 可 以 查看 添加 完成 之 后 的 用 户 清单 ， 如 图 3-103 所 示 。 


Entities 


Lal 


VMs 


Containers ü 


Projects g 

! 5 Total Users 

5 
Catalog Items 0 a NAME 
Images 4 


admin 


gang.wang&ntnx.com 


ming.li&ntnx.com 


san. zhanganins.com 


sspadminantnx.com 


图 3-103 SSP Users 73 3- 


3.42.3 SSP 常见 操作 


SSP 提 供 一 个 基于 角色 的 页 面 视图 ， 每 个 角色 对 应 的 页 面 视图 包含 的 组 件 有 所 不 同 ， 使 用 管理 员 角 色 的 AD 账号 登录 可 以 查看 所 有 的 组 件 ， 自助 服务 的 项 目 用 户 仪 能 查看 被 授权 查看 的 项 目 中 
的 虚拟 机 。 


初始 化 SSP 之 后 ， 可 以 使 用 AD 账 号 通过 浏览 器 访问 如 下 地 址 直接 登录 SSP : 
https://cvm ip: 9440/ssp/ 


登录 成 功 之 后 ， 即 可 使 用 SSP 进 行 日 常 的 操作 ， 如 创建 及 管理 虚拟 机 ， 创 建 及 管理 项 目 ,创建 及 管理 角色 ,创建 及 管理 服务 目录 ， 查 看 及 管理 镜像 等 ， 如 图 3-104 所 示 。 


Pa O~ ? Admin KA 
Entities 

Ov Sortv Groupv S = Y Fitters | 
VMs 0 
"— 0 Type name to filter by | 
Roles 1 
Users 2 No VMs match your current filters. 
Catalog Items 0 
images 0 


图 3-104 SSP 组 件 清 单 


3-104 所 示 的 组 件 说 明 如 下 : 


- 虚拟 机 (VMs) : 


列 出 登录 账户 名 下 所 属 的 所 有 虚拟 机 资源 。 如 登录 账户 为 管理 员 ， 则 可 以 查看 到 集群 中 所 有 虚拟 机 ， 包 括 SSP 用 户 创建 的 ， 以 及 从 Prism 控 制 台 创建 自动 导入 的 应 拟 机 。 


- 在 虚拟 机 视图 窗口 ， 管 理 员 账户 可 以 执行 虚拟 机 相关 的 操作 任务 ， 如 为 菜 一 项 目 创建 一 个 虚拟 机 ， 开 启 或 关闭 虚拟 机 ， 改 变 虚 拟 机 的 所 属 关系 。 如 登录 用 户 为 自助 服务 的 项 目 用 户 ， 则 该 
用 户 只 能 在 授权 的 项 目 中 查看 和 管理 虚拟 机 。 


如 果 管 理 员 想 授 权 某 个 自助 服务 的 项 目 用 户 使 用 虚拟 机 ， 需 要 改变 虚拟 机 所 属 关系 ， 或 者 将 该 用 户 加 入 到 对 应 项 目 用 户 中 。 


` 管理 员 可 以 把 已 有 虚拟 机 作为 模板 添加 到 服务 目录 中 ， 以 便 自助 服务 的 项 目 用 户 使 用 该 模板 创建 新 的 虚拟 机 。 
: JR H (Projects) : 

. 登录 账户 为 管理 员 时 ， 列 出 所 有 项 目 。SSP 中 的 项 目 是 指 分 派 给 一 组 AD 用 户 所 使 用 的 计算 、 存 储 及 网 络 资源 的 集合 。 例 如 ， 一 个 多 个 开发 人 员 共 同 参 与 的 开发 项 目 所 使 用 的 资源 集合 。 
- 管理 员 可 以 在 一 个 项 目 中 定义 访问 该 项 目的 用 户 以 及 该 项 目 可 以 使 用 的 网 络 ， 以 及 计算 或 存储 资源 的 使 用 配额 ， 当 然 ， 也 可 以 使 用 添加 用 户 的 方式 使 某 些 用 户 可 以 访问 项 目 。 

: 角色 (Roles) : 


“ 登录 账户 为 管理 员 时 ， 列 出 所 有 已 创建 角色 ， 包 括 SSP 内 置 角色 。 角 色 即 为 执行 虚拟 机 各 种 操作 的 权限 集合 ， 可 以 新 建 或 管理 角色 ,创建 一 个 项 目 时 ， 该 项 目 将 会 被 赋予 一 个 特定 的 角 
色 ， 该 角色 的 权限 将 授予 添加 至 该 项 目的 所 有 用 户 。 


. SSP 包 含 了 一 个 名 为 “Self-Setvice Admin” 的 内 部 管理 员 角 色 ， 在 初始 化 SSP 时 ,该 角色 已 被 授予 SSP 的 管理 员 用 户 ， 以 及 一 个 名 为 “Prism Admin” 的 Prism 控 制 台 管理 员 角 色 ; 这 两 个 角色 
不 可 删除 或 更 改 。 


“SSP 内 置 了 一 个 名 为 DevOps 的 角色 ， 该 角色 拥有 创建 、 查 看 、 更 新 及 删除 虚拟 机 、 庶 拟 网 卡 、 庶 拟 磁盘 ， 克 隆 虚 拟 机 ， 开 启 和 关闭 虚拟 机 的 操作 权限 。 
“用户 〈Usetrs) : 登录 账户 为 管理 员 时 ， 列 出 所 有 已 添加 至 项 目的 用 户 ， 包 括 内 置 的 管理 员 用 户 和 SSP 的 管理 员 用 户 。 

服务 目录 (Catalog Items) : 登录 账户 为 管理 员 时 ， 列 出 所 有 可 用 的 虚拟 机 模板 或 镜像 ， 以 供 项 目 用 户 创建 虚拟 机 时 使 用 。 

- 镜像 (Images) : 登录 账户 为 管理 员 时 ， 列 出 所 有 上 传 到 SSP 的 磁盘 和 ISO 镜像 ， 可 以 将 镜像 添加 到 服务 目录 ， 以 供 项 目 用 户 创建 虚拟 机 时 使 用 。 


初次 使 用 SSP 时 ， 可 先 创 建 一 个 角色 (Roles) 备用 ， 假 设 为 正在 开发 一 个 名 为 CRM 系 统 的 开发 团队 提供 虚拟 机 资源 ， 需 要 先 创 建 一 个 名 为 “CRM Team” 的 角色 ， 在 实体 列表 中 ， 点 
ib "Roles" ， 然 后 点 击 右 侧 视 图 中 的 “+Create Role" 按钮 ， 如 图 3-105 所 示 。 


iN O~ 


Entities 


| BE" + Create Role 
VMs 3 
t 0 Type name to filter by 
Projects B 
Roles E 3 Total Roles 
Users : 
Catalog Items 1 TOME: 


Prism Admin 


( ) 
Images 4 C) DevOps 
( ) 
[ Self-Service Admin 
图 3-105 “新建 角色 (Roles) 


弹出 新 建 角色 对 话 框 ， 填 写 角色 名 (Role Name) ， 摘 述 信息 (可 选项 ) ， 并 选择 开局 赋予 该 角色 权限 ， 如 打开 虚拟 机 控制 台 (Console) ， 删 除 、 新 建 、 更 新 、 开 启 或 关闭 虚拟 机 。 我 们 
假定 为 “CRM Team” 开 局 上 述 所 有 虚拟 机 相关 的 权限 ， 如 图 3-106 所 示 。 


Create Role x 


General Settings E 
® General Settings 


ROLE NAME 
VM Permissions 


CRM Team Container Permissions 


DESCRIPTION 


A role for CRM team to manage the CRM project 


VM Permissions 
Manage what users can do with their VMs. 


VM ACTIONS 


Console 


Power 


Delete 


Create 


ARAB: 


Update 


Container Permissions 
Manage what users can do with their Containers. 


CONTAINER ACTIONS ENABLED 


Update 


CB 
Delete CB 
CB 


Create 


图 3-106 为 角色 (Roles) 开启 所 有 权限 
点 击 “Save” (保存 ) ， 任 务 完成 之 后 ， 就 可 以 在 右 侧 角色 列表 中 看 到 新 建 的 名 为 “CRM Team" 的 角色 。 
根据 开发 团队 的 业务 需求 ， 为 开发 团队 定制 服务 目录 ， 上 传 镜像 ， 并 将 镜像 添加 人 至 服务 目录 ， 或 将 已 有 的 虚拟 机 作为 模板 添加 人 至 服务 目录 中 。 


在 实体 列表 中 ， 点击 “lImages”， 然 后 点 击 右 侧 视 图 中 的 “+Create Image” 按 钮 ， 弹 出 新 建 镜像 对 话 框 ， 填 写 镜像 名 (Image Name) ， 摘 述 信息 (可 选项 ) ， 并 选择 镜像 类 型 ， 以 及 
镜像 来 源 ， 完 成 之 后 ， 点 击 “Save” (保存 ) ， 如 图 3-107 所 示 。 


Create Image 


General Settings 


IMAGE NAME 


DESCRIPTION 


OS, Applications, Version, etc 


e General Settings 


Image Sources 


IMAGE TYPE 


ISO 


Image Sources 


© From URL 
From URL 
©) From File 


图 3-107 ”新建 镜像 (Images) 窗口 


等 待 镜像 创建 完成 之 后 ， 在 右 侧 镜像 列表 中 选择 新 建 镜像 ， 点 击 “Actions” 按 钮 ， 在 下 拉 菜 单 中 选择 “+Add Image to Catalog”， 在 弹出 对 活 框 中 ， 输 入 镜像 名 称 ， 点 击 “Save” (R 
存 ) 之 后 ， 将 镜像 添加 至 服务 目录 ， 如 图 3-108 所 示 。 


除了 通过 上 述 方法 把 镜像 添加 至 服务 目录 ， 供 项 目 用 户 创建 虚拟 机 之 外 ， 还 可 以 选择 已 有 的 虚拟 机 作为 模板 添加 至 服务 目录 供 项 目 用 户 创建 虚拟 机 时 使 用 。 


在 实体 列表 中 ， 点击“VMs”， 在 右 侧 虚 拟 机 列表 中 选择 一 个 虚拟 机 ， 点 击 “Actions” 按 钮 ， 在 下 拉 菜 单 中 选择 “+Add to Catalog”， 在 弹出 的 对 话 框 中 ， 输 入 虚拟 机 模板 名 称 ， 点 


t "Save" (保存 ) 之 后 ,将 该 虚拟 机 添加 至 服务 目录 ， 如 图 3-109 所 示 。 


至 此 ， 融 可 以 为 该 开 友 团队 新 建 一 个 名 为 “CRM Project” 的 项 目 了 ， 在 实体 列表 中 ,点击 “Projects”， 然 后 点 击 右 侧 视 图 中 的 “+Create Project" iH. 


Entities 


VMs 
Containers 
Projects 
Roles 

Users 
Catalog Items 


| Cv | | Actions v Name 
Windows Server 2012 R2 Disk 
| ae X Delete 
——— " Description 
# Update Image 
中 Add Image to Catalog 
1 Selected 
0 (=) " NAME 
Windows Server 2012 R2 —AÁ 


Add IMAGE to Catalog 


图 3-108 ”将 镜像 添加 到 服务 目录 
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Containers 
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Catalog Items 


Images 
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# Update u 
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Add VM to Catalog 


Name 


Windows Server 2008 R2 VM Temp 


Description 


图 3-109 ”将 虚拟 机 添加 到 服务 目录 


弹出 新 建 项 目 对 话 框 ， 填 写 项 目 名 (Project Name) ， 摘 述 信息 (可 选项 ) ， 添 加 该 项 目的 用 户 或 组 ， 并 选择 角色 为 “CRM Team”， 选 择 该 项 目 可 以 使 用 的 虚拟 网 络 ， 并 设置 资源 配 
额 ， 如 图 3-110 所 示 。 


Q 所 添加 的 用 户 或 组 ， 必 须 为 关联 到 SSP 的 AD 中 的 用 户 或 组 。 


Ruh “Save” 


(保存 ) ， 任 务 完 成 乙 后 ， 就 可 以 在 右 侧 项 目 列表 中 看 到 新 建 的 名 为 “CRM Project” AAT. 


项 目 创建 完成 之 后 ， 退 出 当前 管理 员 用 户 。 


使 用 “CRM Project" 项 目 创建 时 所 添加 的 用 户 名 ， 如 “mei.han@ntnx.com” 重新 登录 到 SSP， 登 录 成 功 之 后 ， 就 能 访问 该 用 户 自 有 的 门户 页 面 ， 在 实体 列表 中 ， 点 击 “VMSs” ， 然 后 点 
击 右 侧 视图 中 的 “+Create VM" 按钮 ， 如 图 3-111 所 示 。 


Create Project x 


General Settings 
€ General Settings 


PROJECT NAME 
Users, Groups and Roles 


CRM Project Network 


Quotas (Optional) 
DESCRIPTION 


A CRM Project for CRM team to develop the CRM system 


Users, Groups and Roles 


Select users and active directory groups. + User 
NAME ACTIONS 
mei.han@ntnx.com -XX 

ROLE TYPE 
CRM Team = 

Network 


Connect your newly deployed VM to an existing network. 


NAME VLAN_ID DEFAULT 


NTNX-CE [e] Yl 


Quotas (Optional) 


VCPUS STORAGE MEMORY 


| 5 VCPUs 100 GiB 10 GiB 


图 3-110 RH (Create Projects) 窗口 


Pa O v ? HanMei KA 


| Ov 


+ Create VM Sort» Group v aa = | Y Filters 
| Type name to filter by 


There are no VMs available on this cluster. 


图 3-111 项 目 用 户 登 录 SSP 的 自助 服务 主页 


弹出 新 建 虚拟 机 对 话 框 ， 需 要 先 选 择 是 从 虚拟 机 模板 ， 还 是 磁盘 镜像 创建 虚拟 机 ， 如 图 3-112 所 示 。 


Create VM X 


e Select source Browse catalog Deploy VM 


Create VM from: 


© vM Template 


Create a new VM from preselected disks, and with a preset CPU and Memory 
configuration. 


O Disk Images 


Create a new VM from one or more mounted disk images. 


假定 选择 使 用 虚拟 机 模板 作为 源 来 创建 虚拟 机 ， 勾 选 “VM Template" ， 然 后 点 击 “Next” ， 页 面 会 列 出 服务 目录 中 所 有 虚拟 机 模板 ， 可 以 输入 特定 关键 字 查 找 某 个 虚拟 机 模板 ， 选 定 虚 
拟 机 模板 ， 点 击 “Next”， 如 图 3-113 所 示 。 


Create VM X 


图 3-112 ”选择 虚拟 机 源 


e Select source e Browse catalog Deploy VM 


Select VM Template 


Windows Server 2008 R2 VM Temp 


CPU 2 VCPU STORAGE 50.07 GB MEMORY 2 GB 


图 3-113 ”选择 虚拟 机 模板 


进入 虚拟 机 部 署 页 面 ， 输 入 虚拟 机 名 称 (Name) ， 目 标 项 目 为 前 面 已 经 创建 好 的 “CRM Project" ， 选 择 虚 拟 机 磁盘 和 虚拟 网 络 ， 如 勾 选 “Advanced Settings" ， 则 可 以 编辑 虚拟 机 的 
CPU 和 内 存 大 小 ; 完成 上 述 配 置 之 后 ， 点 击 “Save” (RF) ， 如 图 3-114 所 示 。 


等 待 虚 拟 机 创建 完成 之 后 ， 就 可 以 在 右 侧 虚 拟 机 列表 中 看 到 新 建 的 名 为 “CRM Web server” 的 虚拟 机 了 ， 勾 选 该 虚拟 机 ， 上 点击 “Actions” 按钮 ， 可 以 从 下 拉 菜 单 中 ， 选 择 对 虚拟 机 进行 
天 机 、 重 置 、 更 新 、 打 开 控 制 台 或 删除 等 操作 ， 如 图 3-115 所 示 。 


除了 上 述 方式 操作 虚拟 机 外 ， 也 可 以 直接 点 击 名 为 “CRM Web server” 的 虚拟 机 ， 会 弹出 该 虚拟 机 的 操作 窗口 ， 可 以 在 该 窗口 中 完成 该 虚拟 机 的 相关 操作 ， 如 图 3-116 所 示 。 


Create VM x< 


pug ol Suu VM C Ww LI VT TAS VOU Lj HY WIFI 


Deploy VM 
Deployment Settings 


NAME 


| CRM Web Server | 


TARGET PROJECT 


| CRM Project w | 
Disks 
BOOT FROM NAME TYPE SIZE (GB) 
O ide.O CDROM : 
© scsi0 DISK 50 
© ide 1 CDROM 0.07 


Selected VM Template 


Windows Server 2008 R2 VM Temp 


CPU 2VCPU STORAGE 50.07 GB MEMORY 2GEB 


Network 


Connect this VM to an existing network. 


NAME 


NTNX-CE 


Advanced Settings 
Manually configure the CPU and Memory for this VM. 


CPU MEMORY 


| 2 VCPU | | 2 GB | 


| Previous | | Save 


图 3-114 设置 虚拟 机 参数 
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| (9) w | Actions v e" 


Typenam © Power Off 


(! Reset 


# Update 


1 Selected 


IE Launch console 


| X Delete 

CRI 

Power State Oo On 
IP Addresses - 
Project CRM Project 


图 3-115 ”操作 项 目 中 的 虚拟 机 


CRM Web Server (D PowerOf | (D Reset | - Moe v | X 


Console Summary Disks NICs 


# CTRL + ALT + DELETE 登录 


‘wr Windows Server 2008 
Datacenter 


图 3-116 ”虚拟 机 操作 窗口 
至 此 ， 已 经 完成 了 在 SSP 中 为 某 个 公司 组 织 创建 项 目 ， 分 配 资源 ， 并 实现 了 该 组 织 的 用 户 使 用 SSP 创 建 及 操作 虚拟 机 。 


当然 ， 还 可 以 使 用 管理 员 账 户 登录 SSP， 查 看 某 个 特定 项 目的 资源 使 用 情况 ， 并 进行 有 针对 性 的 管理 操作 。 受 限于 本 书 的 篇 幅 ， 不 再 一 一 详 述 其 余 功 能 ， 你 可 以 访问 Nutanix 社 区 去 获得 完 
整 的 SSP 管 理 及 使 用 指南 。 


3.4.3 Prism Central 操 作 


Prism Central 作 为 Nutanix 多 集群 管理 控制 人 台 ， 可 以 为 用 户 提供 多 站 点 ， 多 集群 环境 的 统一 管理 能 力 ， 还 支持 不 同 Hypervisor 环 境 的 Nutanix 集 群 的 集中 管理 ， 在 3.3.5 节 中 ， 我 们 已 经 了 解 
了 Prism Central 的 主要 特性 。 本 节 将 就 Prism Central 的 主要 功能 及 操作 进行 讲述 。 


3.4.3.1 Prism Central 概 览 


Prism Central 提 供 的 仪表 板 视图 可 供 你 监控 和 管理 所 注册 的 所 有 集群 中 的 各 项 活动 ， 图 3-117 是 Nutanix 社 区 版 环境 中 已 部 署 的 Prism Central 登 录 之 后 一 个 典型 的 窗口 布局 。 


N.. 


主 仪表 板 


从 管理 仪表 板 + ” 重 置 仪表 板 + 添加 小 部 件 


受 影响 的 集群 集群 快速 访问 任务 


NTNX-CE 查看 所 有 任务 
NTNX-CE 


| 主 仪表 板 区 域 | 最 近 48 个 小 时 没有 任务 活动 。 


You have no alerts. 


集群 CPU 使 用 变 集群 内 存 使 用 变 集群 延迟 


NTNX-CE NTNX-CE NTNX-CE 


控制 器 IOPS 


NTNX-CE 


图 3-117 Prism Central 主 页 


Prism Central 主 菜单 包括 如 下 五 个 主要 的 选项 卡 : 


. 主页 (Home) 选项 卡 显示 主页 仪表 板 。 此 仪表 板 在 一 系列 灵活 的 平 铺 式 窗口 中 显示 摘要 信息 ， 可 以 根据 自己 的 需求 创建 附加 仪表 板 视图 。 


. 浏览 (Explore) 选项 卡 显示 浏览 仪表 板 。 可 供 了 解 各 已 注册 集群 中 的 VM、 集 群 、 主 机 、 磁 盘 、 存 储 容器 和 存储 池 。 通 过 该 选项 卡 还 可 查看 摘要 信息 或 深入 了 解 详细 统计 数据 。 


分 析 (Analysis) 选项 卡 显示 分 析 仪 表 板 。 通 过 此 仪表 板 ， 可 以 为 所 选 对 象 创建 和 监控 性 能 图 。 


- 规划 中 (Planning) 选项 卡 显示 规划 仪表 板 。 通 过 此 仪表 板 ， 可 查看 当前 资源 倒计时 信息 ， 在 造成 后 果 前 解决 潜在 容量 问题 ， 并 创建 假设 情景 以 评估 潜在 未 来 工作 负载 的 资源 需求 。 


. 警示 (Alerts) 选项 卡 显示 警示 仪表 板 。 通 过 此 仪表 板 ， 可 以 查看 和 监控 各 个 已 注册 集群 中 的 警示 。 


除了 上 述 五 个 选项 卡 之 外 ， 在 主 菜单 的 中 央 还 有 任务 图 标 “ 人 加” | 右 侧 还 有 搜索 图 标 “ 圈 ′ ， 帮 助 菜单 图 标 “ 伙 ” ， 配 置 菜单 图 标 “ 图 '， 以 及 用 户 菜单 图 标 “PE 。 其 中 每 个 图 标 
的 详细 功能 如 下 : 


- 任务 图 标 : 点 击 任务 图 标 可 在 单独 的 视图 中 显示 与 这 些 任务 有 关 的 信息 。 


- 搜索 图 标 : 点 击 此 图 标 将 显示 搜索 页 。 搜 索 页 提供 查询 选项 以 及 各 集群 中 对 象 和 操作 的 相关 信息 。 


- 帮助 菜单 : 点 击 此 图 标 可 显示 一 个 列表 ， 其 中 包含 可 供 你 选择 的 帮助 资源 项 。 


. 配置 菜单 : 点 击 次 轮 图 标 将 显示 可 执行 任务 的 列表 。 


- 用 户 菜单 : 此 图 标 中 包含 当前 用 户 登 录 名 称 。 点 击 用 户 图 标 将 打开 一 个 列表 ， 其 中 包含 一 些 用 于 更 新 用 户 账户 、 退 出 Prism Centtal 和 执行 其 他 任务 的 选项 。 下 表 对 下 拉 菜 单 中 的 每 个 选项 


进行 了 


针对 帮助 菜单 ， 配 置 菜单 及 用 户 菜单 的 下 拉 列 表 中 的 项 ,说明 详 见 表 3-12 至 表 3-14。 


表 3-12 帮助 菜单 列表 


名 FR fa o X 


本 页 帮助 打开 摘 述 此 屏 锅 的 在 线 和 帮助 页 面 

Nutanix Next 在 线 社区 在 浏览 器 新 建 一 个 选项 卡 ， 并 访问 Nutanix Next 社区 

常规 帮助 在 浏览 右 狐 建 一 个 选项 卡 ， 并 访问 Prism Central 在 线 帮 助 页 面 
联系 销售 在 浏览 右 新 建 一 个 选项 卡 ， 并 访问 Nutanix 官网 “Contact Us ”页 面 


表 3-13 配置 菜单 列表 


名 


fi xh 


升级 Prism Central 打开 Upgrade Software 窗口 可 将 Prism Central VM 升级 到 更 高 版 本 
SSE 证 书 打开 SSL Certificates 窗口 可 创建 自 签名 证 书 
用 户 管理 打开 User Management 窗口 。 可 以 完成 添加 、 更 新 和 删除 用 户 账户 
角色 映射 打开 Role Mapping 窗口 可 配置 在 用 户 身 份 验证 过 程 中 应 用 的 角色 映射 
身份 验证 打开 Authentication Configuration 窗口 ， 可 配置 Prism Central 身份 验证 
打开 Update Capacity Configurations 窗口 ， 在 该 窗口 中 配置 用 于 集群 资源 倒计时 分 析 的 计 
i 算 规则 和 警示 
l 打开 Alert Email Configuration 窗口 ， 可 以 在 该 窗口 中 配置 应 用 于 所 选 〈 或 所 有 ) 4TEREBRE 
HRE FUERE | 示 消 息 的 规则 和 模板 
警示 策略 打开 Alert Policies 窗口 ， 指 定 哪些 事件 应 生成 警示 以 及 系统 检查 每 个 事件 类 型 的 频率 
HTTP 代理 打开 HTTP Proxy 窗口 ， 可 配置 Nutanix 软件 可 连接 到 的 HTTP 代理 
语言 设置 打开 Languages cem 和 窗口， 选择 Prism Central 显示 语言 
NTP 服务 需 打开 NTP Servers 窗口 ， 可 指定 要 访问 的 NTP IRI at 
SMTP 服务 大 打开 SMTP Server Settings 窗口 ， 可 配置 SMTP 服务 需 
vCenter 注册 打开 vCenter Registration 窗口 ， 完 成 vCenter Server 在 Prism Central 的 注册 (或 取消 注册 ) 
PA PRIR IS A 打开 Name Servers 窗口 ， 可 配置 域名 服务 大 
欢迎 界面 打开 Edit Welcome Banner 窗口 ， 可 创建 用 户 登 录 到 Prism Central 主页 前 显示 的 欢迎 窗口 消息 
HPA HRE 打开 UI Settings 窗口 ， 可 禁用 (或 重新 启用 ) R DiRe t sea) E] 
S 打开 Pulse fid Er iL, Jaje Nutanix Support Team 发 送 集群 故障 信息 的 功能 以 便 用 于 分 
脉冲 Doge 
析 及 定位 故障 
集群 锁定 打开 Cluster Lockdown 窗口 ， 可 以 在 该 窗口 中 删除 (或 添加 ) SSH 在 访问 Prism Central 时 
使 用 的 公共 号 份 验证 密 铀 
表 3-14 用 户 菜单 列表 
名 FR Tí Y 
EAR 打开 Change Password 窗口 ， 可 更 新 当前 登录 账户 的 密码 
clit 打开 Update Profile 窗口 ， 可 更 新 用 户 名 称 和 电子 邮件 地 址 
下 载 Cmdlet 安装 程序 下 载 适 用 于 Nutanix Cmdlet HY PowerShell 安装 程 友 
下 载 nCLI 将 Nutanix 命令 行 接口 (nCLI) 作为 zip 文件 下 载 到 本 地 系统 
KF Nutanix 打开 一 个 窗口 ， 其 中 显示 Nutanix 操作 系统 (AOS) 和 其 他 版 本 信息 
内 上 最 无 事 打开 一 个 仅 供 消遣 的 诉 戏 。 如 需 退 出 该 游戏 ， 点 击 屏 惰 右上 角 的 关闭 按钮 
注销 退出 Prism Central 控制 台 


3.4.3.2” 自 定义 仪表 板 


登录 到 Prism Central 页 面 之 后 ， 在 默认 的 “主页 ”中 就 会 显示 一 个 主 仪表 板 ， 该 仪表 板 提 供 针 对 集群 的 默认 视图 。 如 果 需 要 对 集群 的 视图 进行 定制 化 ， 则 可 以 通过 管理 仪表 板 ， 创 建新 仪 
表 板 来 添加 自 定义 视图 。 


如 需 创建 新 仪表 板 ， 请 执行 以 下 操作 : 
1) 在 “主页 ”仪表 板 中 ， 点 击 “ 管 理 仪表 板 ” 按 钮 ， 如 图 3-118 所 示 。 


P.. 


主页 浏览 分 析 规划 中 =R 


主 仪表 板 à 管理 仪表 板 + ” 重 置 仪表 板 + 添加 小 部 件 


受 影响 的 集群 集群 快速 访问 集群 存储 


5 


图 3-118 管理 仪表 板 


There are currently no custom dashboards. Click the 


New Dashboard button above to create a new custom dashboard. 


图 3-119 ”新 建 仪表 板 


2) 在 “管理 仪表 板 ” 窗 口中 ， 执 行 以 下 操作 ， 如 图 3-119 所 示 。 

a) Fath "MERC FRED. 

b) 在 显示 的 字段 中 输入 仪表 板 名 称 。 

c) &uh "WEG iE. 

3) 新 仪表 板 选 项 卡 将 显示 在 “ 主 仪表 板 ”选项 卡 旁 边 。 新 仪表 板 最 初 没有 小 部 件 ; 点 击 “ 添 加 小 部 件 ” 按 钮 ， 如 图 3-120 所 示 。 

4) 弹出 “添加 小 部 件 ” 窗 口中 ， 选 择 左 侧 所 列 的 可 用 小 部 件 ， 然 后 将 其 添加 至 仪表 板 ;， 重 复 此 步骤 ， 直 到 所 需 的 所 有 小 部 件 均 添加 至 仪表 板 ， 如 图 3-121 所 示 。 
5) 完成 小 部 件 的 添加 之 后 ， 点 击 右 上 和 角 的 关闭 按钮 返回 到 新 仪表 板 ， 就 完成 了 自 定义 仪表 板 的 设置 ， 如 图 3-122 所 示 。 


IN... 


主 仪表 板 


主页 浏览 分 析 规划 中 =R 


CE 仪表 板 > 管理 仪表 板 + 添加 小 部 件 


It seems your dashboard is empty. 
Add Widgets 


图 3-120 ”在 新 仪表 板 中 添加 小 部 件 


添加 小 部 件 


| 搜索 小 部 件 Q 这 是 预定 义 的 小 部 件 。 没 有 定制 可 用 。 
TOM WI ER 

自 定 义 警报 小 部 件 

最 佳 小 部 件 列表 


Custom Chart Widget 
集群 CPU (FA 


CLUSTER WIDGETS NTNX-CE 八 16.68% 
集群 CPU 使 用 率 
集群 延迟 
集群 内 存 使 用 率 
集群 快速 访问 
集群 资源 倒计时 
集群 存储 
控制 器 IOPS 
受 影 响 的 集群 
性 能 
任务 
或 者 添加 并 返回 至 仪表 板 


图 3-121 添加 小 部 件 到 仪表 板 


INS 主页 浏览 分 析 规划 中 警报 


主 仪 表 板 CE 仪表 板 > 管理 仪表 板 + 添加 小 部 件 


集群 CPU 使 用 率 集群 延迟 集群 内 存 使 用 率 控制 器 IOPS 


NTNX-CE f^. 12.23% NTNX-CCE ”~ 人 人 人 一 1ms NTNX-CE / 91.66% NTNX-CE AN 4 IOPS 


图 3-122 ”完成 后 的 自 定义 仪表 板 
3.4.3.3 Prism Central 常见 操作 


Prism Central 具 有 强大 的 实体 监控 和 统计 功能 ， 通 过 浏览 选项 卡 的 仪表 板 ， 可 实现 多 种 方法 及 形式 下 ， 碍 看 注册 到 Prism Central 的 各 个 集群 中 实体 对 象 的 统计 数据 ， 并 通过 丰富 的 饰 选 和 
展现 形式 来 显示 上 述 信息 。 


Prism Central 实 体 对 象 是 指 注 册 到 Prism Central 的 集群 中 某 实 体 对 象 类 型 的 一 个 或 多 个 实例 ， 例 如 集群 、 虚 拟 机 、 主 机 、 磁 盘 或 存储 容器 。 在 浏览 选项 卡 页 面 的 左 侧 列 出 了 所 有 可 用 的 实 
体 对 象 ， 页面 的 右 侧 则 是 选中 的 实体 类 型 的 相关 操作 ， 显 示 选 项 ， 篇 选 选项 以 及 该 实体 类 型 所 有 的 实体 对 象 清单 ， 如 图 3-123 所 示 。 


主页 ME 分 析 Bu SR 


L1] 
= o. ka 焦点 颜色、 ge 三 vx 
VM 5 
3t M 

集群 à 键入 名 称 进行 簿 选 wy | 
主机 1 
磁盘 E 5 总 计 VM [A - 1-5/5 
容器 4 

O ^ 名 称 主机 管理 程序 内 存 容量 ip 地 址 电源 状态 集群 

国 @ CRM Web Server - - 2GiB - 关闭 NTNX-CE 

(] @ NTNX9c4a5ba4-A-CVM NTNX-9c4a5ba4-A AHV 16 GiB — 1921681202 打开 NTNX-CE 

. € Prism-Central NTNX-9c4a5ba4-A AHV 12GiB 1921681200 打开 NTNX-CE 

() | € Windows Server 2008 R2  - - 2GiB - 关闭 NTNX-CE 

Ej @ Windows Server 2012R2  - " 2GiB - xm NTNX-CE 


图 3-123 ”浏览 选项 卡 页 面 


如 图 3-123 所 示 ， 在 浏览 选项 卡 中 ， 选 定 实体 为 虚拟 机 (VM) 之 后 ， 在 页 面 右 侧 就 会 列 出 注册 集群 中 所 有 的 虚拟 机 清单 ， 而 且 在 Prism Central 中 可 以 直接 完成 “创建 虚拟 机 ”和 “网 络 配 
置 ”操作 ， 具 体 的 操作 步骤 与 Prism 控 制 人 台中 的 操作 类 似 ， 可 以 参见 3.4.1 节 。 


除了 可 以 直接 进行 实体 对 象 的 操作 之 外 ，Prism Central 浏 览 选 项 卡 提 供 了 丰富 的 显示 及 筛选 功能 ， 可 以 根据 实际 需求 对 集群 中 实体 对 象 进行 显示 及 和 饰 选 设置 ， 下 面 以 虚拟 机 (VM) 实体 为 
例 ， 来 看 下 针对 虚拟 机 的 显示 选项 的 多 种 设置 。 


在 浏览 选项 卡 右 侧 窗口 的 上 部 菜单 栏 中 有 六 个 实体 对 象 显示 按钮 ， 分 别 是 “焦点 ” “颜色 ” “组 ”“ 表 ”“ 平 铺 ” 和 “ 圆 形 ”。 通 过 点 击 不 同 的 按钮 ， 可 以 以 不 同 的 形式 展现 实体 对 象 。 
实体 的 “焦点 ”显示 选项 ， 可 以 实现 对 实体 对 象 某 些 特定 属性 的 显示 视图 ， 内 置 了 “常规 ”或 “性 能 ”， 也 可 进行 自 定义 焦点 ， 在 默认 情况 下 ， 实 体 对 象 以 “常规 ”焦点 进行 显示 ， 如 图 3- 


124 所 示 ， 列 表 按 照 虚 拟 机 名 称 排序 ， 列 出 了 虚拟 机 所 在 主机 ， 管 理 程序 ， 内 存 容 量 ，IP 地 址 ， 电 源 状态 以 及 所 在 集群 名 称 的 信息 ， 而 且 可 以 通过 点 击 对 应 的 类 别 进 行 排序 。 


如 果 更 关注 每 个 虚拟 机 的 性 能 情况 ， 如 虚拟 机 的 内 存 使 用 率 ， 读 取 IOPS， 写 入 IOPS3，1MO 寓 宽 ，MO 延 迟 及 所 在 集群 名 称 的 话 ， 可 以 选择 “性 能 ”焦点 ， 实 现 对 虚拟 机 上 述 性 能 类 型 的 展现 
列表 ， 如 图 3-125 所 示 。 


o. EXT uv Hee me monos (v8 
键入 名 称 进行 筛选 bun 
5 总 计 VM [A 1-5/5 wv 


O | + 名 称 主机 管理 程序 内 存 容量 ip 地 址 电源 状态 集群 

O a CRM Web Server - - | 2 GiB | - 关闭 NTNX-CE 
B @ NTNX-9c4a5ba4-A-CVM NTNX-9c4a5ba4-A AHV 16 GIB 1921681202 打开 NTNX-CE 
Ed & Prism-Central NTNX-9c4a5ba4-A AHV 12GiB 1921681.200 打开 NTNX-CE 
C) @ Windows Server 2008R2  - - 2GiB - 关闭 NTNX-CE 
LJ @ Windows Server 2012 R2 - - 2GiB - 关闭 NTNX-CE 


图 3-124 “常规 ”焦点 视图 列表 


列 Performance x AARTE 清除 fy v 
5 总 计 VM 四 .1-5/5v < > 

O f- 名 称 AEB (2) ER IOPS 写 入 IOPS VO 带宽 VO 延迟 ”集群 

O = @ CRM Web Server N/A 3 : 2 - NTNX-CE 

C) 9 NTNX-9c4a5ba4-A-CVM N/A 0 IOPS 0 IOPS O KBps Oms  NTNX-CE 

C) 9 Prism-Central N/A 0 IOPS 10 IOPS 135 KBps 11ms NTNX-CE 

C) @ Windows Server 2008 R2 N/A - - - - NTNX-CE 

o @ Windows Server 2012 R2 N/A - - E -  NTNX-CE 


图 3-125 “性 能 ”焦点 视图 列表 


Prism Central 除 了 上 述 两 种 焦点 视图 外 ， 还 支持 自 定义 焦点 ， 以 快速 实现 对 实体 对 象 的 特定 信息 进行 视图 展现 。 点 击 “ 焦 点 ”后 ， 在 下 拉 菜 单 中 点 击 “添加 自 定义 ”， 如 图 3-126 所 示 。 


Ov + 创建 虚拟 机 颜色 v 组 v m non rds 


| 常规 v 
| 键入 名 称 进行 筛选 | 
| 性 能 | 
， 使 用 以 下 链接 创建 自 定义 焦 
5 总 计 VM 点 ! (A .1-5/5v 
+ 添加 自 定义 | 
O «+ 名 称 主机 管理 程序 p 电源 状态 集群 


图 3-126 自 定 义 焦点 


在 弹出 的 焦点 自 定义 窗口 中 ， 添 加 窗口 右 侧 列 出 的 实体 属性 ， 点 击 “Save” (RF) ， 如 图 3-127 所 示 。 


VM 列 X 


单 击 蓝 色 "+" 按钮 ( 最 多 人 允许 10 ) 选择 您 希望 从 左 框 添加 的 列 。 如 要 排列 选 定 列 的 顺序 ， 请 悬 停 并 
单 击 上 /下 按钮 。 


搜索 Q Cyl] 最 多 10 
Name 
Acropolis VM 


S Host IP 
Cluster 


© IP Addresses 
Controller IOFS 
Controller Read lo Bandwidth 
Controller Read I/O Latency 
Controller Write 0 Bandwidth 


Controller Write /OQ Latency 


CPU Usage 


o0 00 0o 000 0 


Disk Capacity 


E]3-127 自 定义 虚拟 机 的 焦点 


自 定义 焦点 后 ， 页 面 自 动 切换 到 刚 创建 完成 的 自 定 义 焦 点 视图 ， 实 现 对 虚拟 机 所 选择 的 属性 的 展现 列表 ， 如 图 3-128 所 示 。 


fae me. me monos [vee] 


| ABEL x^ AZINET 清除 ty | 
5 总 计 VM (A - 1-5/5 + 


e Windows Server 2008 R2 e £ 


D 

[ @ CRM Web Server : : 

上 © NTNX-9cA4abba4-A-CVM 192 168 1.201 192 168 1.202 
C) ® Prism-Central 192 168 1.201 192 168 1.200 
CJ 

C) 


e Windows Server 2012 R2 : = 


A3-128 “ 自 定 义 ” 焦 点 视图 列表 


上 述 按照 “焦点 ”的 方式 展现 实体 对 象 外 ， 还 可 以 使 用 如 “颜色 ”的 方式 展现 实体 ， 如 图 3-129 所 示 。 选 择 按照 “虚拟 CPU 计数 ”的 方式 展现 ， 就 能 快速 地 将 集群 中 所 有 虚拟 机 按照 虚拟 
CPU 的 数量 进行 不 同 颜色 的 标注 。 


| em | + 创建 虚拟 机 > 网 络 配置 焦点 v Mf. 组 v mono: | y ibi | 
— 和 庶 拟 CPU 计数 w ————— 
| AEA EM CP.. x AGE TIME | 清除 Vy v | 
ee RE is 
运行 状况 

5 总 计 VM [^ - 1-5/5 ~ 

C 4 名 称 主机 管理 程序 内 存 容量 IP 地 址 电源 状态 和 集群 

[-] @ CRM Web Server - - 2 GiB - 关闭 NTNX-CE 

C) e NINX-9c4a5ba4-A-... NTNX-9c4abba... AHV 16 GiB 192 1681.202 打开 NTNX-CE 

= ® Prism-Central NTNX-Sc4a5ba._.. AHY 12 GIB 192 1681.200 打开 NTNX-CE 

, @ Windows Server 20... E s 2GB  - 关闭 NTNX-CE 

(J @ Windows Server 201. - z 2GB  - 关闭 NTNX-CE 


虚拟 CPU 计数 ez e 4 


图 3-129 “虚拟 CPU 计数 ”标注 虚拟 机 列表 


Prism Central 除 了 提供 上 述 实体 对 象 的 操作 及 展现 外 ， 还 可 以 针对 集群 提供 完整 的 监控 及 容量 规划 能 力 ， 在 “规划 中 ”选项 卡 中 ， 可 以 自 定义 一 个 场景 ， 实 现 一 键 式 规划 ， 也 可 以 查看 已 
注册 集群 的 容量 资源 倒计时 ， 如 图 3-130 和 图 3-131 所 示 。 


IS xu 浏览 分 析 规划 中 警报 


场景 - 容量 资源 倒计时 


欢迎 使 用 一 键 式 规划 。 


将 新 的 或 增长 的 工作 负载 要 求 与 所 需 的 实时 资 
源 匹配 。 


创建 和 管理 工作 负载 场景 ， 并 根据 机 器 学 习 的 
消耗 行为 获取 计划 资源 建议 。 


图 3-130 ”一 键 式 规划 场景 


在 容量 资源 倒计时 视图 中 ， 会 列 出 所 有 注册 到 Prism Central 的 集群 信息 ， 点 击 某 个 集群 ， 就 会 弹出 该 集群 摘要 信息 汇总 窗口 ， 如 图 3-132 所 示 ， 可 以 直接 在 该 窗口 启动 集群 的 Prism 控 制 


警示 及 容量 四 个 选项 卡 。 


IN, xm WE sm 规划 中 =R 


台 ， 升 级 集群 的 软件 ， 窗 口 还 提供 集群 概要 信息 、 使 用 率 、 


景 容量 资源 倒计时 
a 名 称 


NTNX-CE 


Summary Usage Alerts Capacity 


CLUSTER NAME 


NTNX-CE 


Version 2017.05.22 
Hypervisor Type AHV 
Health Warning 
Number of Hosts 1 


External Subnet | 1921681.0/255 255 2550 


Internal Subnet 
192 168.5.0/255 255 255 128 


整体 资源 倒计时 CPU 资源 倒计时 


图 3-131 容量 资源 倒计时 


Cluster-wide CPU Usage 


内 存 资源 倒计时 存储 资源 倒计时 


启动 Prism Upgrade Software ? x 


峰值 : 220895 ”当前 值 : 13.61% 


a Far eee ee 


下 午 4:30 下 午 5:00 


Cluster-wide Memory Usage 


下 午 4:30 下 午 5:00 


Cluster-wide Controller IOPS 


下 午 5:30 下 午 6:00 


峰值 : 91.88% 当前 值 : 91.88% 


下 午 5:30 下 午 6:00 


峰值 : 19 IOPS 当前 值 : 5 IOPS 


图 3-132 ”集群 摘要 选项 卡 


上 述 内 容 是 Prism Central 常 见 操 作 的 简单 介绍 ， 受 限于 本 书 的 篇 幅 ， 不 再 对 其 他 功能 进行 一 一 详 述 ， 可 以 访问 Nutanix Next 社 区 资源 去 获得 完整 的 Prism Central 管 理 及 使 用 指南 ， 对 


Prism Central 的 功能 和 特性 进行 深入 了 解 。 


3.4.4 ”常见 排 错 操作 


3.4.4.1 ”USB 启动 设备 故障 
如 果 Nutanix 社 区 版 集群 的 USB 启 动 设备 故障 的 话 ， 可 以 参考 如 下 步骤 对 集群 进行 恢复 ， 而 无 须 重新 安装 。 
1) 关闭 Nutanix 社 区 版 节点 。 


2) 参照 3.3.1 节 下 载 及 制作 镜像 盘 ， 重 新 制作 对 应 版 本 的 Nutanix 社 区 版 的 USB 启 动 设备 。 


— 


3) 将 重新 制作 的 USB 启 动 设备 插入 关机 后 的 节点 ， 开 机 后 ， 进 入 Nutanix Community Edition 欢 迎 信息 ， 输 入 install， 不 需要 输入 密码 ， 按 “ 回 车 键 ” 继 续 。 


xo 


4) 进入 Nutanix Community Edition 安 装 器 ， 选 择 键盘 布局 后 ， 选 择 “Proceed”; 按 “ 回 车 键 ” 继 续 。 


5) 在 安装 选项 中 ， 选 择 “Repair Host”， 按 “ 回 车 键 ” 继 续 。 


6) 输入 主机 IP 地 址 、 子 网 掩 码 、 网 天 信 息 ， 按 “ 回 车 键 ”， 进 入 节点 恢复 流程 。 


xo 


7) 完成 节操 恢复 之 后 ，CVM 会 自动 重启 ， 大 约 需 要 2 ~ 3 分 钟 集群 重新 引导 成 功 。 


xo 


3.4.4.2” 某 一 节点 9S9D 故 障 
如 果 Nutanix 社 区 版 集群 的 SSD 硬 盘 故 障 的 话 ， 可 以 参考 如 下 步骤 对 集群 进行 恢复 ， 而 无 须 重 新 安装 。 
Os 只 有 当 Nutanix 社 区 版 集群 为 多 节点 集群 ， 某 个 节点 的 SSD 故 障 时 ， 使 用 该 方法 以 恢复 集群 。 
1) 从 集群 中 移 除 故 障 的 SSD 硬 盘 : 
a) 在 集群 CVM 中 运行 如 下 命令 : 
$ ncli disk remove-start id=cvm boot disk id 


b) 使 用 root 用 户 登 录 到 故障 SSD 硬 盘 所 在 主机 ， 运 行 如 下 命令 : 

# sudo /root/cleanup.sh 

c) 移 除 故 障 SSD 并 将 新 的 SSD 插 入 节点 中 ， 开 机 后 ， 进 入 Nutanix Community Edition 欢 迎 界面 ， 输 入 install， 不 需要 输入 密码 ， 按 “ 回 车 键 ”继续 。 
d) 在 安装 选项 中 ， 选 择 “Repair CYM”， 按 “ 回 车 键 ” 继 续 。 

e) 输入 CVM 1P 地 址 、 子 网 掩 码 、 网 关 人 信息， 如 必要 ,编辑 之 前 的 主机 IP 地 址 、 子 网 掩 码 、 网 关 信息 ， 以 完成 安装 。 

f) 在 接 下 来 的 页 面 中 ， 确 认 已 发 现 的 CVM 引 导 硬 盘 。 

g) 等 待 约 15 分 钟 ，CVM 完 成 引导 。 

h) 在 集群 中 另 一 节点 的 CVM 中 运行 如 下 命令 ,其 中 cvm _ip 为 故障 SSD 所 在 主机 的 CVM IP 地 址 : 

$ boot disk replace --cvm ip-cvmip 

2) 如 果 上 述 服务 未 启动 ， 运 行 如 下 命令 ， 重 启 Genesis 服 务 : 


S genesis restart 


第 4 章 HCI 规划 与 设计 


超 融 合 系统 的 兴起 为 数据 中 心 管理 者 提供 了 一 种 全 新 的 数据 中 心 建设 思 路 ， 结 合 虚拟 化 和 分 布 式 系统 的 技术 特点 与 优势 ， 任 何 单个 组 件 的 损坏 都 不 会 影响 到 整个 集群 的 运行 和 使 用 。 超 融合 
系统 在 建设 的 过 程 中 ， 如 果 玖 忽 了 对 超 融 合 环境 的 规划 与 设计 ， 可 能 最 终 的 效果 并 不 如 人 意 。 


本 章 主要 介绍 Nutanix 超 融合 系统 在 规划 设计 方面 的 内 容 ， 主 要 涵盖 计算 、 人 存储 、 网 络 资源 、 安 全 以 及 可 用 性 方面 的 规划 设计 。 
说 明 在 本 章 的 行文 中 ， 如 未 特别 注释 ， 节 点 和 主机 ， 机 箱 与 Block 为 同一 对 象 。 
节点 用 于 解释 在 Nutanix 超 融合 集群 中 物理 主机 (服务 器 主机 ) 的 逻辑 概念 ， 如 在 一 个 机 箱 中 提供 了 4 个 Nutanix 节 点 ， 与 在 一 个 机 箱 中 提供 了 4 个 服务 器 主机 同 义 。 


Block 用 于 介绍 在 Nutanix 集 群 中 的 机 箱 的 逻辑 概念 ， 如 这 个 Nutanix 集 群 包含 了 3 个 Block， 与 这 个 Nutanix 集 群 中 包含 了 3 个 机 箱 同 义 。 


4.1 计算 规划 设计 


在 计算 资源 的 规划 设计 方面 ， 我 们 主要 关注 超 融 合 节 点 中 的 CPU 和 内 存 两 个 方面 。 在 不 同 的 业务 场景 里 ， 业 务 应 用 对 CPU 和 内 存 的 要 求 不 同 ， 在 规划 阶段 需要 根据 业务 需求 进行 CPU 和 内 存 
容量 的 规划 。 


4.1.1 ”物理 CPU 到 vCPU 的 换算 
在 非 虚拟 化 的 环境 里 ， 安 装 在 服务 器 上 的 系统 和 应 用 程序 可 以 独占 整个 服务 器 的 计算 资源 ， 但 是 在 虚拟 化 环境 里 ， 因 为 虚拟 化 层 之 上 运行 了 多 个 虚拟 机 ， 每 个 虚拟 机 按照 业务 需求 划分 配置 
vCPU 和 内 存 资源 ， 在 虚拟 化 层 就 存在 着 物理 CPU 到 vCPU 的 换算 关系 (也 称 虚 拟 化 整合 比 ) 。 


在 一 个 超 融 合 节 点 上 我 们 配置 了 2 颗 8 核 ( 共 16 个 物理 核 ) 的 CPU， 如 果 在 这 个 节点 上 我 们 计划 运行 多 个 谷 hvCPU 的 虚拟 机 ， 在 暂 不 考虑 虚拟 化 层 等 损耗 及 资源 复 用 的 情况 下 ， 每 个 节点 只 
能 同时 运行 4 个 上 述 配置 的 虚拟 机 。 在 这 种 配 比 关系 下 ， 虚 拟 化 层 的 调度 任务 较 轻 ， 虚 拟 机 可 以 以 独占 的 方式 获取 和 使 用 CPU 物理 核资 源 。 


得 荔 于 虚拟 化 层 的 CPU 超额 分 配 技术 以 及 物理 CPU 的 多 线程 技术 ， 我 们 可 以 在 这 人 台 服 务 器 上 运行 多 于 4 个 的 4 颗 vVCPU 的 虚拟 机 ， 举 例 来 说， 当 我 们 运行 16 个 上 述 配置 的 虚拟 机 时 ， 物 理 CPU 
与 VCPU 的 比例 将 变 成 1 : 4。 在 生产 环境 里 ， 换 算 比 完全 取决 于 应 用 程序 对 CPU 的 性 能 需求 以 及 整体 CPU 的 负载 情况 。 


一 般 来 说 ， 对 于 延迟 敏感 及 关键 的 业务 系统 ， 我 们 可 以 从 1 : 1 或 者 1 : 2 的 比例 开始 进行 CPU 的 虚拟 化 。 但 是 对 于 其 他 一 般 工 作 负 载 (〈 非 关键 应 用 、 对 延迟 不 敏感 ) 的 虚拟 机 ， 我 们 可 以 设置 
换算 比 为 1 : 4 甚至 更 高 。 在 以 办 公 需 求 为 主 的 VDI 环 境 里 ，CPU 的 换算 比 甚至 可 以 高 达 1 : 10 的 比例 。 


因此 ， 对 于 刚 开始 使 用 虚拟 化 的 用 户 ， 可 以 从 静态 、 相 对 较 低 的 换算 比 开 始 ， 按 照应 用 的 响应 情况 逐步 提高 换算 比值 ( 即 增加 更 多 的 虚拟 机 负载 ) 。 另 外 ， 虚 拟 化 层 提 供 的 动态 资源 调配 的 
功能 ， 可 以 在 计算 资源 不 平衡 的 情况 下 帮助 管理 员 自 动 实现 集群 主机 上 的 虚拟 机 的 自动 负载 平衡 。 
Os 在 虚拟 化 环境 里 ， 不 建议 物理 节点 的 物理 CPU 的 使 用 量 超过 80%， 如 果 应 对 延迟 较 敏 感 ， 应 该 将 主机 CPU 的 使 用 量 控制 得 更 低 ; 否则 会 因为 CPU 资源 争 抢 导致 应 用 的 性 能 下 降 。 


Hypervisor 自 身 也 会 占用 一 定 比 例 的 CPU 资源 ， 不 同 的 Hypervisot 占 用 比例 不 同 ， 读 者 可 以 查阅 对 应 的 Hypetvisot 资 料 获取 详细 信息 。 


4.1.2 内存 资 源 的 换算 
在 虚拟 化 环境 里 ， 虚 拟 机 高 度 依赖 CPU 和 内 存 资源 ， 得 益 于 内 存 技术 的 发 展 ， 单 个 服务 器 上 可 以 提供 的 内 存 容量 已 经 越 来 越 大 ， 而 且 内 存 的 价格 也 越 来 越 低 。 因 此 ， 大 部 分 的 情况 下 ， 虚 拟 
化 用 途 的 服务 器 均 会 配置 大 容量 内 存 。 


因此 ,在 虚拟 机 内 存 分 配 时 ， 可 以 先 从 1 : 1 的 比例 开始 分 配 。 即 256GB 内 存 的 服务 器 上 ， 可 以 运行 64 个 的 4GB 虚 拟 内 存 的 虚拟 机 ， 扣 除 Hypervisor 占 用 的 内 存 以 及 虚拟 机 开机 对 虚拟 化 层 的 
额外 开销 ， 按 1 : 1 的 比例 计算 ， 此 服务 器 可 以 运行 的 虚拟 机 应 该 在 60 个 以 内 。 


虽然 虚拟 化 系统 可 以 支持 内 存 的 超额 使 用 ， 即 256GB 物 理 内 存 的 主机 上 运行 超过 64 个 4GB 虚 拟 内 存 的 虚拟 机 。 但 是 与 CPU 的 换算 方式 类 似 ， 对 于 延迟 敏感 型 的 虚拟 机 ， 仍 然 建 议 物 理 内 存 与 
虚拟 内 存 的 比例 为 1 : 1， 对 于 延迟 不 敏感 而 且 使 用 上 和 存在 空 闪 的 工作 负载 ， 可 以 适当 提高 物理 内 存 到 虚拟 内 存 的 换算 比例 。 


Os 在 虚拟 化 环境 里 ， 不 推荐 物理 节点 的 物理 内 存 的 使 用 量 超过 80%， 如 果 应 对 延迟 较 敏 感 ， 应 该 将 主机 内 存 的 使 用 量 控制 得 更 低 ; 否则 会 因为 内 存 资 源 争 用 导致 应 用 的 性 能 下 降 。 


Hypetvisor 自 身 也 会 占用 一 定 容 量 的 内 存 资源 ， 对 内 存 虚 拟 化 的 实现 能 力也 不 尽 相 同 ， 读 者 可 以 查阅 对 应 的 Hypetvisor 资 料 获 取 详 细 信息 。 


41.3 计算 资源 的 数据 收集 


工作 负载 决定 了 计算 资源 要 求 ， 针 对 不 同 的 工作 负载 我 们 可 以 选择 不 同 的 配置 的 CPU 和 内 存 来 达到 所 需 的 计算 能 力 。 


以 VDI 场 景 为 例 ， 对 于 普遍 办 公 的 VDI 环 境 ， 对 于 CPU 和 内 存 的 要 求 相对 比较 低 ， 普 遍 的 CPU 和 内 存 配置 束 可 以 基本 满足 业务 需求 。 因 此 ， 在 这 种 工作 负载 的 情况 下 ， 我 们 无 须 选 配 较 高 配 
置 的 CPU (如 E5-2695 v4) ， 因 为 E5-2640 v4 CPU 就 已 经 可 以 满足 性 能 上 的 要 求 。 但 是 如 果 VDI 的 应 用 场景 是 用 于 开发 人 员 ， 那 么 可 能 对 于 CPU 的 要 求 就 会 有 所 不 同 ， 需 要 配置 相对 高 主 频 的 
CPU 才 可 以 满足 开发 人 员 的 开发 、 编 译 的 工作 需要 。 


一 些 梨 面 虚 拟 化 广 商 也 提供 了 针对 桌面 的 资源 评估 软件 ， 允 许 用 户 对 当前 使 用 的 物理 桌面 环境 进行 资源 评估 。 如 通过 VMware 提供 的 3SysTrack Desktop Assessment 工 具 可 以 对 用 户 当前 使 
用 的 桌面 、 应 用 程序 进行 分 析 ， 提 供 负载 特性 分 析 以 及 趋势 预测 等 功能 。 此 外 ，Liquidware 公 司 推出 的 Stratusphere 工 具 可 以 为 不 同 的 桌面 虚拟 化 环境 提供 资源 评估 ， 如 图 4-1 所 示 。 
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图 4-1  Stratusphere # ig 


对 于 关键 的 数据 库 应 用 ， 如 Oracle 或 者 MS SQL server， 其 对 CPU 的 计算 能 力 相 比 VDI 要 求 要 高 ， 往 往 需要 配置 超过 2.6GHz 主 频 的 CPU 才 可 以 让 数据 库 进 程 不 会 因为 CPU 的 配置 过 低 造 成 
性 能 瓶颈 。 对 于 当前 已 经 在 使 用 物理 机 运行 的 数据 库 实 例 ， 可 以 通过 数据 库 提 供 的 性 能 工具 了 解 其 对 CPU 的 资源 要 求 ， 如 果 当 前 配置 的 CPU 为 E5-2620 v4 有 目 运行 效果 就 已 经 可 以 满足 业务 要 
求 ， 那 么 我 们 在 虚拟 化 后 的 超 融 合 环境 里 ， 完 全 可 以 使 用 性 能 相当 或 者 略 高 的 CPU。 而 如 果 是 一 个 全 新 的 数据 库 实例 ， 在 超 融合 节点 中 选 配 高 主 频 的 CPU 会 更 合适 。 


对 于 未 采用 虚拟 化 技术 的 用 户 ， 如 果 计 划 迁 移 到 虚拟 化 环境 ， 可 以 使 用 虚拟 化 厂商 提供 的 工具 进行 性 能 数据 的 收集 。 如 VMware Capacity Planner, Microsoft Assessment and 
Planning Toolkit 等 工具 进行 数据 收集 和 分 析 ， 用 于 虚拟 化 前 的 评估 工作 。Microsoft Assessment and Planning Toolkit 人 允许 IT 人 员 直 接 下 载 使 用 ， 而 VMware Capacity Planner 只 能 供 经 过 
VMware 认证 的 合作 伙伴 才 可 以 使 用 。 


Microsoft Assessment and Planning Toolkit 是 一 个 集 清 单 、 评 估 与 报告 于 一 体 的 工具 ， 用 于 收集 当前 IT 环境 的 信息 ， 帮 助 用 户 了 解 当 的 IT 环境 信息 ， 用 于 进行 虚拟 化 的 资源 整合 ， 如 图 
4-2 所 示 。 


'& Microsoft Assessment and Planning Toolkit 
File View Tools Help 


Inventory and Assessment | Discovery and Readiness 


Œ- Discovery and Readiness 

Ga Inventory Summary Results The MAP Toolkit assists in pre-sales and planning efforts by performing assessment and readiness " 
z " di gu: analysis providing automated inventory and assessment capabilities. Information about each scenario 

# Performance and Consolidation can be found in the Getting Started Guide as well as sample reports and outputs. 


To discover, inventory and assess the environment for the scenarios below, use the: 
Inventory and Assessment Wizard 


| Client “Virtualization 

ze - 
Windows 7 Readiness Assessment Virtual Machine Discovery 
Microsoft Office 2010 Assessment 
Internet Explorer Discovery 


Windows Server 2008 R2 Readiness Microsoft SQL Server Discovery 
Windows Server Roles Discovery MySQL Discovery 
Windows Server 2008 Readiness Orade Discovery 
Windows 2000 Migration Assessment Sybase Discovery 


Cloud 


Web Application and Database 
Discovery 
Office 365 Readiness 


图 4-2 Microsoft Assessment and planning Toolkit j t 


此 外 ， 不 同 的 虚拟 化 平台 关于 电源 策略 的 设置 也 会 影响 CPU 的 性 能 发 挥 ， 以 VMware vSphere 为 例 ， 其 提供 的 电源 策略 初始 为 平衡 模式 。 在 虚拟 化 的 数据 库 环 境 里 ， 为 了 更 好 地 发 挥 CPU 的 
性 能 ， 建 议 将 主机 的 电源 策略 修改 为 高 性 能 模式 以 发 挥 CPU 的 性 能 ， 如 图 4-3 所 示 。 
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图 4-3 设 定 电源 策略 为 高 性 能 


414 计算 资源 的 损耗 类 型 
4.1.4.1 CVM 的 计算 资源 损耗 
与 传统 的 虚拟 化 环境 相 比 ， 超 融合 系统 之 上 除了 需要 运行 应 用 虚拟 机 (也 称 用 户 虚 拟 机 ) 之 外 ， 在 每 个 Nutanix 节 点 上 都 会 运行 一 个 Controller VM (简称 CVM) ， 如 图 4-4 所 示 。 


用 户 VM Nutanix Controller VM 
(faro Ea E) (& B Ea—^) 


ww C3 c) 
=e 


图 4-4 Nutanix CVM 示 意图 


针对 不 同 的 应 用 程序 负载 ， 管 理 员 需 要 为 CVM 设 置 不 同 的 vCPU 和 虚拟 内 存 配 置 。 针 对 所 有 Nutanix 机 型 ， 在 默认 情况 下 每 个 CVM 的 硬件 配置 均 为 8 颗 vCPU 和 20GB 内 存 ， 管 理 员 通 过 
Foundation 软 件 搭 建 Nutanix 集 群 时 可 以 设置 CVM 的 内 存 。 如 图 4-5 所 示 ， 管 理 员 为 CYVM 配 置 了 32GB 内 存 。 


E 1. Block & Node Config 2. Global Config 3. Node Imaging 4. Clusters 


Global Configuration 
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图 4-5 Foundation} d "P 3X E CVM Ps E 


CVM 的 vCPU 的 数量 可 以 根据 节点 上 配置 的 CPU 核 数 来 决定 ， 但 不 建议 vCPU 的 数量 超过 单 CPU 核 数 的 75% 且 最 多 不 超过 12 颗 。 举 例 为 说 ， 节 点 上 配置 的 两 颗 16 核 的 CPU，CVM 的 vCPU 数 
量 建 议 不 超过 12 颗 。 如 果 节 点 配置 的 是 两 颗 8 核 的 CPU， 那 么 建议 将 CVM 的 vCPU 数 量 设置 为 6 颗 ( 即 单 处 理 器 核 数 的 75%) 。 


在 CVM 的 内 存 配 置 方面 ， 考 虑 到 不 同 的 应 用 程序 对 存储 的 读 写 特点 和 性 能 需求 不 同 ， 可 以 参考 表 4-1 的 建议 来 设置 CVM 内 存 。 


表 4-1 工作 负载 类 型 与 CVM 内 存 配 置 


工作 负载 类 型 内 存 (GB) 
VDI, Jl 45-28 e 446 20 
重度 负载 存储 28 
仓储 专用 28 
KARA at. VERE. ADM 32 


如 无 法 参照 表 4-1 定 义工 作 负载 类 型 ， 也 可 以 基于 Nutanix 环 境 中 开启 的 存储 特性 来 调整 CVM 内 存 的 配置 。 管 理 员 以 默认 的 20GB 内 人 存 容量 为 基础 ， 根 据 人 存储 特性 需求 来 增加 对 应 特性 所 需 的 
AG ( 即 CVM 的 内 存 容 量 ) ， 但 是 不 建议 将 CVM 的 内 存 容量 设置 成 超过 32GB， 如 表 4-2 所 示 。 


表 4-2 存储 特性 与 CVM 内 存 配 置 


存储 特性 所 需 内 存 (GB) 
容量 层 重复 数据 删除 (已 包含 性 能 层 重复 数据 删除 ) 12 
JERAT 3 8 
性 能 层 重复 数据 删除 8 
冷 数 据 广 点 + 容量 层 重复 数据 删除 4 
容量 层 重 复数 据 删 除 + TURF 3 12 


虚拟 化 层 通 过 资源 预 留 方式 来 确保 CVM 虚拟 机 可 以 得 到 所 需 的 CPU 和 内 存 资源 。 如 图 4-6 所 示 ， 虚 拟 化 层 为 CVM 预 留 了 10000M Hz 的 CPU 资源 (默认 配置 ) ，32GB 的 内 存 (取决 于 为 
CVM 配 置 的 虚拟 内 存量 ) 。 
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图 4-6 CVM CPU 和 内 存 资源 预 贸 
Qa 如 果 管 理 员 计划 在 vCentef Servetr 中 创建 资源 池 对 虚拟 机 的 资源 进行 限制 和 预 留 ，Nutanix CVM 虚 拟 机 必须 拥有 最 顶层 的 资源 份额 (不 受 手 工 创建 的 资源 池 资 源 限制 ) 。 
4.1.4.2 ”虚拟 机 的 额外 损耗 


虚拟 机 启动 后 ， 虚 拟 机 内 的 操作 系统 、 应 用 程序 除了 需要 消耗 CPU 和 内 存 资源 之 外 ， 虚 拟 化 层 也 会 存在 CPU 和 内 存 开销 。 表 4-3 中 列 出 了 一 些 不 同 配置 的 虚拟 机 所 在 虚拟 化 层 的 Hypervisor 
的 内 存 开 销 。 以 一 个 8vCPU，16GB 内 存 的 VMware 虚拟 机 为 例 ，vSphere ESXi 需 要 额外 消耗 168.6MB 内 人 存 。 


表 4-3 虚拟 机 内 存 开销 示例 


ED SP VOPU 


对 于 Nutanix AHV 而 言 ， 运 行 在 其 上 的 虚拟 机 数量 也 同样 影响 着 AHV 对 CPU 及 内 存 资源 的 损耗 情况 ， 每 增加 一 个 虚拟 机 ，AHV 将 会 额外 占用 约 60MB 内 存 以 保证 虚拟 机 的 正常 运行 。 


因此 ， 在 超 融 合 环境 里 ， 除 了 需要 计算 每 个 虚拟 机 Guest Os 占 用 的 内 存 之 外 ， 还 需要 根据 虚拟 机 的 硬件 配置 额外 计算 Hypervisor 的 CPU 和 内 存 开销 。 如 在 一 个 VMware vSphere 为 底层 虚 
拟 化 系统 的 VDI 环 境 中 ， 我 们 需要 6 个 超 融合 节点 为 500 个 用 户 提供 2 颗 vCPU，4GB 内 存 的 虚拟 桌面 ， 那 么 我 们 需要 提供 内 存 资 源 可 以 使 用 如 下 公式 进行 估算 : 


总 内 存 需求 = (虚拟 机 数量 X 虚 拟 机 内 存 + 虚 拟 机 数量 X 虚 拟 化 内 存 开销 ) + (节点 数量 XCVM 内 存 ) 

在 上 述 场 景 下 ， 所 需 的 内 存 容量 为 (500x4GB+500x52.72MB) + (6x32GB) ~2200GB, 
4.1.4.3 ”影响 计算 性 能 的 其 他 因素 

超 线 程 


目前 的 主流 CPU 均 已 经 提供 超 线 程 的 功能 。 单 线程 心 片 每 秒 钟 能 够 处 理 成 干 上 万 条 指令 ， 但 是 在 任 一 时 刻 只 能 对 一 条 线程 进行 操作 。 而 超 线程 技术 可 以 使 心 片 同时 进行 多 线程 处 理 ， 使 心 
性 能 得 到 提升 ， 通 过 开启 超 线程 ， 系 统 可 以 得 到 额外 的 10 ~ 20% 的 性 能 提升 。 


在 Nutanix 销 售 的 硬件 上 ， 超 线程 功能 已 经 配置 为 启动 状态 ， 因 此 管理 员 不 需要 手动 修改 BIOS 配 置 以 开启 此 功能 。 在 虚拟 化 环境 里 ， 开 启 超 线程 有 助 于 提高 CPU 的 使 用 效率 和 性 能 。 
NUMA 


NUMA ( 非 统一 内 存 访问 ) 是 一 种 在 多 CPU 系统 里 让 CPU 就 近 访 问 内 存 ， 提 高 性 能 和 系统 可 扩展 性 的 机 制 。 如 图 4-7 所 示 。 在 双 CPU (每 颗 8 个 物理 核 ) 、128GB 内 存 的 服务 器 上 ， 每 个 
NUMA 节 点 (取决 于 物理 CPU 数量 ) 本 地 拥有 64GB 内 存 。NUMA 节 点 内 部 访问 内 存 (本 地 访问 内 存 ) 的 速度 要 快 于 跨 节点 访问 内 存 的 速度 。 


图 4-7 NUMA 示 意图 


NUMA 的 特性 与 虚拟 机 的 虚拟 硬件 配置 大 小 有 着 直接 关系 ; 虚拟 机 的 硬件 配置 大 小 决定 了 系统 调 取 资源 的 方式 ， 即 虚拟 机 运行 时 是 本 地 访问 内 存 还 是 跨 节点 访问 内 存 。 


举例 来 说 ， 如 果 使 用 2 颗 Intel E5-2699v4 CPU (每 颗 CPU 有 22 个 核 ) ，128GB 内 存 的 服务 器 上 将 虚拟 机 的 vCPU 数 量 设置 为 小 于 等 于 22 核 时 则 与 NUMA 节 点 容量 匹配 。 在 这 种 情况 下 ， 虚 
拟 机 的 vVCPU 可 以 本 地 化 访问 NUMA 节 点 的 内 存 资 源 ， 相 比 大 于 22 核 vYCPU 的 虚拟 机 ， 在 内 存 访问 上 会 更 快 。 同 理 ， 在 虚拟 机 的 内 存 上 ， 设 置 为 小 于 等 于 64GB 也 与 NUMA 容 量 匹配 。 


表 4-4 是 以 配置 了 2 颗 Intel E5-2640v4 CPU 的 服务 器 为 例 讲述 NUMA 节 点 配置 原则 ; 管理 员 在 给 虚拟 机 分 配 vVCPU 时 ， 应 该 遵循 NUMA 节 点 配置 原则 。 


表 4-4 虚拟 机 vCPU 分 配 示 例 


虚拟 机 配置 使 用 NUMA 
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2 Wii Intel Xeon E5-2640 v4, 
每 颗 104%, FE 20 个 物理 核 


| 


2: 
fai 
= 


— | = | = | = | = | = | = | 一 — 


No 
© 


N N N N 


— 
© 
N 


计算 性 能 的 最 佳 实践 

` 应 合理 分 配 虚 拟 机 的 vCPU、 内 存 ; 超额 分 配 会 造成 虚拟 化 层 的 调度 负载 。 

+ 监控 虚拟 机 的 vCPU、 内 存 使 用 量 ， 从 小 的 配置 开始 ， 根 据 情况 逐步 添加 资源 ， 分配 更 多 vCPU 和 内 存 不 一 定 会 得 到 更 好 的 性 能 。 
` 对 于 延迟 敏感 型 的 应 用 (如 数据 库 应 用 ) ， 不 要 超额 分 配 vCPU 和 内 存 资源 。 


- 遵循 NUMA 节 点 配置 原则 。 


4.1.5” 超 融合 资源 计算 实战 

在 超 融合 环境 的 使 用 过 程 中 ， 我 们 不 仅 要 面 对 虚 拟 化 环境 到 超 融合 环境 的 迁移 ， 可 能 还 会 遇 到 物理 环境 到 超 融合 环境 的 迁移 。 在 迁移 之 前 ， 我 们 需要 对 计算 能 力 进 行 评 估 ， 以 确保 虚拟 机 在 
迁移 后 可 以 得 到 相同 甚至 更 好 的 性 能 。 

我 们 以 数据 库 环境 为 例 ， 某 客户 的 数据 中 心中 有 16 台 SQL Server 服 务 器 ， 目 前 均 以 物理 机 方式 运行 。SQL Server 服 务 器 的 配置 介绍 如 表 4-5 所 示 。 


表 4-5 数据库 服务 器 示例 表 


wa oun monem. 


MB-PROD-001 ass HE M ir Server 1 
MB-PROD-004 o pepe os pon os SQL Server 4 
MB-PROD-005 NEN GENE EN Ae NETE SQL Server 5 
MB-PROD-007 L3 ps pep ps Toe pom 9c SQL Server 7 
MB-PROD-009 SQL Server 9 
MB-PROD-012 SQL Server 12 
MB-PROD-013 L3 ps pepe 3 ps pom am SQL Server 13 
Total C pss | ses 


上 述 的 16 台 数据 库 均 各 自 运行 在 物理 服务 器 上 ， 所 有 的 CPU 型 号 均 为 Intel Xeon Processor X5680。 这 些 服务 器 高 峰 时 的 CPU 使 用 率 为 50%， 日 常 使 用 率 约 为 30%。 内 存 的 使 用 率 高 峰 为 
75%， 平常 使 用 率 只 有 40%。 


nu 
"eene 


有 了 上 述 这 些 信息 ， 我 们 需要 计算 出 使 用 超 融 合 时 的 CPU、 内 存 这 两 个 指标 的 要 求 。 
通过 表 4-5， 我 们 能 够 统计 出 总 的 CPU 核 数 为 192 核 ， 通 过 SPEC 网 站 查询 ， 我 们 能 够 得 到 Intel Xeon Processor X5680 处 理 器 的 性 能 值 为 每 核 39。 
我 们 以 当前 主流 的 几 款 Intel 至 强 E5 CPU 为 例 ， 来 对 比 计算 CPU 之 间 的 SPEC 值 的 差别 ， 如 表 4-6 所 示 。 


#4-6 CPU SPEC 对 比 


SEE SPEC E (SE) 


通过 表 4-6 可 知 ，E5 的 CPU 表现 出 来 的 性 能 要 明显 好 于 早年 的 X5680 CPU, B3(&CPU (Intel Xeon Processor X5680 与 Intel Xeon E5-2620 v4) 的 SPEC 值 的 比例 约 为 1 : 1.5 (39:58) , 


另外 ， 原 有 的 服务 器 的 CPU 高 峰值 仪 为 50%， 使 用 率 并 不 高 ， 通 过 虚拟 化 整合 多 个 虚拟 机 ， 我 们 可 以 将 物理 服务 器 的 CPU 的 使 用 率 值 控制 到 65% 左 右 (在 虚拟 化 环境 里 ， 整 合 更 多 的 虚拟 机 
可 以 使 CPU 的 使 用 率 进 一 步 提高 ， 但 应 用 系统 的 响应 时 间 可 能 会 受到 影响 ) ， 那 么 我 们 可 以 在 CPU 的 性 能 上 再 节省 30% (从 50% 到 65% 的 使 用 率 提升 ) 左右 。 使 得 物理 CPU 到 vCPU 的 整合 比 变 
成 1 : 1.95。 


有 了 这 些 数值 ， 我 们 可 以 通过 Nutanix Sizer 工 具 进 行 测算 ， 使 用 Sizer 工 具 进行 测 算 时 ，Sizer 会 自动 扣除 Hypervisor 以 及 超 融 合 系统 CVM 所 需要 的 各 类 负载 损耗 。 


我 们 在 Sizer 中 选择 工作 负载 类 型 为 RAW input， 如 图 4-8 所 示 。 


Workload Name 


select 
VDI 
RDSH/XenApp 


Server Virtualization 
Workload Name SQL Server 


Splunk L 


Workload TypeB A | 


File Services M 


图 4-8 Sizet 工 作 负 载 选 择 界面 


CPU 的 数量 被 设置 为 192 颗 ，vCPU 到 物理 CPU 的 比例 设置 为 1.95。 其 他 值 如 实 填 写 即 可 。 如 内 存 忌 量 为 2048GiB， 和 存储 空间 为 48TiB ( 约 为 51TB) ， 同 时 设置 CYM 所 需 的 CPU 和 内 存 值 , 
如 图 4-9 所 示 。 


vCPUs 
vCPU:pCore ratio 
RAM (GiB) 

HDD Storage (TiB) 
SSD Storage (TiB) 


Core Overhead per CVM 


RAM Overhead per CVM(GiB) 32 


图 4-9 设置 工作 负载 参数 


最 后 Sizer 给 出 的 推荐 的 节点 数量 为 6 台 ， 配 置 如 图 4-10 所 示 。 


Sizing Summary 


Specification: Homogenous Standard Any 
6 Cluster-1 

Rack Space NX-8035-G5 
19% 14% 28 Cores  3840GBSSD 6 
CPU RAM 512GB RAM 32TBHDD 

Nodes 
70% 61% 
SSD HDD 


1.87 
kW 


图 4-10 Sizet 结 果 


但 是 考虑 到 CPU 和 内 存 的 负载 已 经 高 于 我 们 推荐 的 65%， 因 此 我 们 可 以 通过 增加 节操 的 数量 来 降低 CPU 和 内 存 的 使 用 量 。 将 超 融 合 节 点 增加 到 8 台 ，CPU 和 内 存 的 负载 值 均 已 经 降 到 65%， 
如 图 4-11 所 示 。 


Sizing Summary 


Specification: Manual 


Cluster-1 
NX-8035-G5 
O O 
65% 57% 28 Cores 3840GB SSD 8 
CPU RAM 512GB RAM  32TB HDD 
Nodes 
58% 
SSD 
2.49 
kW 
通过 上 面 的 实战 ， 我 们 可 以 看 出 ， 不 同 代数 的 CPU 的 性 能 值 相 差 较 大 ， 通 过 以 上 的 换算 ， 我 们 只 需要 以 往 一 半数 量 的 服务 器 ， 即 可 以 得 到 相当 水 平 的 性 能 ， 同 时 又 兼顾 了 系统 整体 的 可 用 
性 。 


Rack Space 


49% 
HDD 


图 4-11 增加 超 融 合 节 点 后 的 Sizet 结 果 


IL . E 
Os 在 进行 CPU 资源 的 换算 时 ， 我 们 除了 可 以 使 用 PEC 之 外 ， 还 可 以 使 用 SAP 的 SAP SD 值 来 换算 。 两 个 Benchmatk 工 具 的 网 址 如 下 : 
SPEC CPU Benchmark: https://www.spec.org/cpu2006/results/cpu2006.html#S PECint 


SAP SD Standard Performance Tests: http:/ /www.sap.com/solution/benchmatk /measuring. html 


4.2 ”存储 规划 设计 


Nutanix 的 存储 资源 由 Nutanix 的 分 布 式 存储 组 件 提供 。 通 过 汇聚 整个 集群 中 的 硬盘 组 成 一 个 逻辑 资源 池 ， 通 过 划分 存储 容器 的 方式 为 虚拟 化 主机 提供 数据 存储 ， 所 有 文件 以 vDisk 形 式 存 放 


在 存储 容器 中 ， 比 如 虚拟 机 的 磁盘 文件 、 日 志文 件 等 ， 如 图 4-12 所 示 。 


Nutanix Hypervisor 
硬盘 组 存储 池 不 适用 
1 人 或 个 
虚拟 机 /文件 组 仔 储 容器 Datastore 
1 个 或 多 个 
文件 虚拟 磁盘 虚拟 磁盘 / 文件 (如 VMDK) 


图 4-12 ”Nutanix 存 储 组 件 作用 


4.2.1 ”全 闪存 异 式 和 混合 模式 


为 了 满足 不 同 的 应 用 负载 ，Nutanix 集 群 提 供 全 闪 及 混合 模式 集群 。 

全 内 模式 即 超 融 合 节 点 全 部 使 用 固态 硬盘 ， 而 不 使 用 机 械 磁盘 ， 以 得 到 更 好 的 I/O 性 能 和 更 低 的 延迟 。 
混合 模式 即 超 融 合 节 点 同时 使 用 固态 硬盘 和 机 械 磁 盘 。 通 过 Nutanix 软 件 来 实现 数据 的 自动 分 层 ， 将 热点 数据 放 在 SSD 上 ， 把 不 经 常 访问 的 数据 存储 在 机 械 磁 盘 上 ， 以 平衡 性 能 与 成 本 两 方 
面 的 因素 。 表 4-7 忆 结 了 全 闪存 模式 和 混合 模式 的 主要 区 别 。 


RAT 全 闪 与 混合 存储 对 比 


对 比 项 全 闪 模 式 混合 模式 
性能 v^ 


容量 
成 本 适中 
适合 场景 数据 库 等 对 UO 有 高 要 求 的 场景 任何 


企业 可 以 根据 应 用 负载 、 人 存储 性 能 要 求 、 容 量 要 求 以 及 预算 情况 综合 考量 来 选择 全 闪 人 存 异 式 或 混合 模式 的 超 融合 方案 。Nutanix 又 持 在 同一 集群 里 同时 采用 全 闪存 模式 和 混合 模式 的 节点 类 


型 ， 来 满足 客户 在 同一 环境 中 不 同 应 用 负载 的 个 性 化 需求 。 


4.2.2. Fete 


Nutanix 集 群 创建 完成 后 ， 各 节点 的 所 有 的 SSD 和 HDD 均 会 自动 加 入 到 同一 个 存储 池 中 。 如 图 4-13 所 示 ， 集 群 各 节点 上 的 所 有 的 20 块 硬盘 均 加 入 到 这 个 存储 池 中 ， 共 提供 了 13.65TiB 的 物理 


容量 
Volume Group Storage Pool 15torage Pool - - X^ -| search in table Q 
5 USED (PHYSICAL) MAX CAPACITY DISK AVG IO 

F AL) 2! = > 
a NAME DISKS FREE (PHYSICAL) 6) PHYSICAL) @ DISK IOPS DISK IO B/W ey 
StoragePool 20 6.43 TIB 722 TiB 13.65 TiB 97 15 MBps 0.48 ms 


图 4-13 ”存储 池 界 面 


一 个 存储 设备 同一 时 间 仪 可 分 配 至 一 个 存储 池 ， 不 同人 存储 池上 的 虚拟 机 之 间 是 物理 隔离 的 ， 因 此 ， 在 一 个 集群 上 可 以 创建 多 个 存储 池 用 于 满足 物理 隔离 的 需求 。 举 例 来 说 ， 因 为 法 规 要 求 可 


能 需要 将 一 些 虚 拟 机 存储 在 指定 的 硬盘 上 ， 且 与 其 他 的 虚拟 机 在 人 存储 上 进行 物理 隔离 ， 而 不 是 随机 存放 在 所 有 的 硬盘 上 。 


Boras 


在 存储 容量 规划 前 ， 我 们 需要 收集 各 业务 系统 所 需 的 存储 空间 ， 并 得 到 业务 部 门 对 具体 需求 的 确认 。 这 有 利于 我 们 进行 硬盘 容量 和 数量 设计 。 


举例 来 说 ， 业 务 系统 需要 10TB 的 可 用 容量 ， 如 果 我 们 配置 3 个 Nutanix 节 点 ， 每 个 节点 配置 1 块 480GB SSD, 3iR4TB HDD， 共 提供 12.48TB 的 物理 容量 。3 个 节点 可 提供 37.44TB 的 物理 容 
量 。 除 去 Nutanix 集 群 所 需 占 用 的 元 数据 、CVM 空间 、 缓 存 等 ， 实 际 得 到 的 容量 并 不 是 18.72TB (以 RF=2 为 例 ，37.44TB 除 以 2 份 数据 ) ， 而 是 16.14TB， 如 图 4-14 所 示 。 


SSD size: 480GB Y 
j Effective Capacity: 16.14TB (14.68TiB) 
SSD qty: 1 s 
HDD size: Te * | A Nutanix Home: 180.00GiB 
HOD qty: z " Q Cassandra: 90.00GiB 
& Oplog: 226.85GiB 
NEPEAN RAs iis z te Content Cache: 60.00GiB 
Node count: 3 $ 83 Extent store (SSD): 234.66GiB 
ae Curator: 670.55GiB 
Edi e Extent store (HDD): 14.45TiB 
Storage Efficiency: None T 


图 4-14 Nutanix 硬 盘 使 用 量 计 算 器 


读者 可 访问 http://designbrews.com/ 获 得 上 图 的 硬盘 使 用 量 计算 器 。 另 外 ，Nutanix Sizer 工 具 相 比 硬盘 使 用 量 计算 器 是 一 个 更 加 专业 的 帮助 TT 人员 进 行规 划 设 计 的 工具 ， 如 图 4-15 所 示 。 


Sizing index 
Main VMware Cluster — 4 Ù 14 Q 
Server Profile Rack space Standard 
Medium 
NX-8035-G4 
f VM 
gita 12 Cores 3200 GB SSD a 
283 14 256 GB RAM 16 TB HDD 
Nodes 


NX-5035-C 


6.3 


KW 


Workload Name Workload Type Profile Type aby Cores RAM (TB) HDD (TB) SSD (TB) 


Main VMware Cluster Server Virtualization Medium 283 94.30 1.52 155.87 15.59 


Total 94.30 1.52 155.87 15.59 


Assumptions Core RAM (TB) HDD (TB) 

Raw Capacity 228.03 219 308.00 27.34 
CVM Overhead -56.03 -0.22 -2910 -5.30 
Usable Capacity (RAW-Overhead) 172.00 197 278.90 22.04 
Spare Capacity (Usable-Workload Total) FIO 0.45 123.03 6.45 
% Utilized 65.93 79.45 60.06 76.41 


图 4-15 Nutanix Sizer 


Nutanix Sizer 工 具 除 了 可 以 实现 硬盘 使 用 量 计算 之 外 ， 还 可 以 用 于 计算 资源 的 估算 ， 并 自动 推荐 适合 用 户 工作 负载 的 Nutanix 节 点 、 配 置 以 及 数量 信息 。 


u 


Qs Nutanix 官 方 建议 一 个 Nutanix 超 融合 集群 中 只 使 用 一 个 存储 池 。 因 为 创建 多 个 存储 池 后 ， 可 能 会 出 现 资源 浪费 的 现象 。 如 一 个 集群 中 创建 了 两 个 存储 池 ， 可 能 会 存在 存储 池 1 上 的 
空间 已 经 用 完 ， 但 是 存储 池 2 上 还 剩余 大 量 的 空闲 空间 。 因 此 ， 使 用 一 个 存储 池 可 以 有 效 提高 存储 利用 率 。 


4.2.3 ”存储 容器 设计 


在 一 个 Nutanix 集 群 中 ， 管 理 员 可 以 创建 多 个 存储 容器 ， 并 在 存储 容器 上 设置 不 同 的 RF 值 、 容 量 、 存 储 功能 (压缩 、 重 复数 据 删 除 、 纠 删 码 ) 等 ， 如 图 4-16 所 示 。 


Create Storage Container 


(] COMPRESSION 


DEDUPLICATION 
(] CACHE @ 


Perform inline deduplication of read caches to optimize performance. 


CAPACITY 


= 
L Pre mg ct-nI mg Emm = "Pump EI SF 4 
i d a a ol i i i i el il Bo a dl ss Sid 


C] ERASURE CODING (2) 


Erasure coding enables capacity savings across solid-state drives and hard disk 
drives. 


T Advanced Settings | Cancel | (Sees 


图 4-16 ”存储 容器 高 级 设置 


举例 来 说 ， 在 Nutanix 集 群 里 ， 可 以 创建 两 个 存储 容器 并 分 别 命名 为 Container1 和 Container2。 设 置 Container1 的 RF 值 为 2， 但 Container2 的 RF 值 为 3。 虚 拟 化 管理 员 可 以 在 创建 虚拟 机 
时 ,创建 不 同 的 虚拟 磁盘 并 存储 到 不 同 的 存储 容器 中 ， 如 将 系统 磁盘 放置 在 Container1 中 ， 而 数据 磁盘 放置 在 Container2 中 ， 以 实现 系统 盘存 储 2 份 ， 但 数据 存储 3 份 的 见 余 设置 。 


© 注意 ”默认 情况 下 ， 基 于 vSphere 虚 拟 化 层 的 Nutanix 集 群 会 自动 创建 两 个 存储 容器 即 default-Container-xxxx (xxxx 为 随机 产生 的 一 组 数字 ) VA NutanixManagementShare o 
4.2.3.1 硬盘 容量 建议 


在 集群 规划 时 还 需要 考虑 到 见 余 节 扣 的 数量 ， 宛 余 节 点 是 指 在 其 损坏 的 情况 下 ， 存 储 和 计算 资源 都 可 以 继续 保证 业务 运行 的 节点 。 在 虚拟 化 软件 里 也 提供 了 元 余 节 扣 的 数量 设置 ， 如 图 4-17 
Fax, VMware vSphere 人 允许 管理 员 按 照 数量 、 比 例 来 设置 接 入 控制 策略 ， 以 防止 因为 部 分 主机 停机 致使 HA 组 件 不 能 接管 所 有 虚拟 机 的 运行 需求 。 


VMware vSphere 的 接 入 控制 策略 提供 了 计算 资源 的 元 余 度 设置 ， 而 Nutanix 在 存储 级 别 也 提供 了 类 似 的 功能 。 


我 们 以 最 小 规模 的 Nutanix 集 群 即 3 个 节点 的 集群 为 例 ， 假 设 每 个 节点 均 配 置 了 10TB 的 裸 容量 (SSD+HDD 容 量 ) ， 人 在 容忍 一 个 节点 故障 的 情况 下 ， 实 际 的 裸 容量 从 30TB 变 成 20TB， 实 际 可 
用 的 数据 也 会 从 15TB 以 内 降 到 10TB 以 内 。 我 们 在 设计 存储 容量 时 需要 考虑 到 见 余 节 点 的 数量 ， 否 则 可 能 会 出 现在 某 一 个 节点 故障 后 ， 部 分 数据 会 因为 没有 剩余 空间 不 能 按照 RF 设置 进行 重建 ， 
也 融 不 能 保证 对 所 有 的 数据 按照 RF 设 置 进行 见 余 保护 。 
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图 4-17 VMware vSphere 的 接 入 控制 策略 


在 数据 没有 重建 完成 ( 即 部 分 数据 没有 被 元 余 保 护 ) 的 情况 下 ， 友 生 新 的 节点 或 硬盘 故障 ， 虚 拟 机 可 能 会 因为 数据 不 完整 而 不 能 正常 工作 。 因 此 ， 我 们 建议 在 生产 环境 里 对 空间 进行 预 留 ， 
那么 实际 可 用 的 数据 容量 3 单 节点 物理 容量 x ( 忌 节 点 数量 -可 容忍 损坏 的 节操 数量 ) /RF 值 (2 或 3) 。 当 然 ， 以 上 方法 并 没有 考虑 到 压缩 、 重 复数 据 删除 、 纠 删 码 等 存储 特性 局 用 的 情况 ， 这 些 
特性 有 助 于 优化 存储 容量 ， 提 高 集群 内 存储 容量 的 利用 率 。 


通过 设置 图 4-18 中 的 RESERVED CAPACITY ( 预 留 容量 ) 和 ADVERTISED CAPACITY (最 大 容量 ) 可 以 避免 因为 节点 故障 而 导致 的 可 用 空 用 不 足 的 问题 。 


如 图 4-18 所 示 ， 我 们 创建 了 一 个 存储 容器 ， 并 预 留 至 少 500GiB 的 空间 给 这 个 Container (集群 里 总 的 可 用 空间 将 立即 减少 ) ， 同 时 我 们 修改 ADVERTISED CAPACITY 为 1TiB， 即 这 个 
Container 最 大 可 以 用 到 1TiB。 当 Container 的 可 用 空间 用 到 一 定 比 例 时 ， 系 统 将 自动 触 友 报 警 机 制 给 管理 员 提 示 空 间 不 足 的 风险 。 管 理 员 也 可 以 随时 对 上 述 的 两 个 容量 值 进行 在 线 的 扩展 或 收 
缩 。 


4.2.3.0 DatastoreiZit 


在 使 用 VMware vSphere 作 为 虚拟 化 层 系 统 时 ，Nutanix 存 储 容器 通过 NFS 协 议 来 连接 Nutanix 分 布 式 存储 并 以 Datastore 方 式 挂 载 到 ESXi 之 上 。 


ADVANCED SETTINGS 
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COMPRESSION 
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EX Advanced Settings 


图 4-18 存储 容器 上 的 空间 预 留 及 最 大 空间 设置 


在 共享 存储 模式 下 ， 管 理 员 需 要 考虑 RAID 级 别 、RAID 组 中 的 磁盘 数量 


、LUN 大 小 、Datastore 大 小 、Datastore 上 承载 的 虚拟 机 数量 等 配置 。 而 在 Nutanix 超 融合 集群 里 ， 管 理 员 不 再 需要 


考虑 这 些 问 题 ， 这 是 因为 Nutanix 系 统 提供 的 性 能 与 Container 的 容量 大 小 、 个 数 没 有 关系 。 在 使 用 过 程 中 ， 仅 需 要 根据 应 用 负载 类 型 和 存储 策略 来 确定 Datastore 的 数量 和 容量 即 可 ， 如 两 种 不 


同类 型 和 级 别 的 应 用 负载 可 以 通过 创建 两 个 Datastore 来 存放 。 


需要 注意 的 是 ， 每 个 超 融合 节点 均 板 载 了 一 块 64GB 容 量 的 SATA DOMZ (Serial ATA Disk on Module， 服 务 器 板 载 SSD 盘 ) ， 用 于 安装 运行 Hypervisor。 
每 个 主机 上 挂 载 的 SATA DOM 盘 ， 如 图 4-19 所 示 。 


在 vSphere Client 上 可 以 看 到 


BRR SSE. m 


$n + TRS 设备 驱动 器 类 型 | 容量 | 可 用 空间 | 类 型 m". 
Ei  NTNXdocal-ds-145M36390025-D = & 正常 LocalATADisk(t10.ATA .. SSD 32.00 GB ^ 50.89 GB VMFS5 20 7 
CO[L—á——— MÀ : 
数据 存 娃 详细 信息 EH... 
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图 4-19 SATA DOM 在 ESXi 上 的 展现 方式 


Nutanix 节 点 内 的 SATA DOM 盘 的 容量 为 64GB， 只 用 于 安装 虚拟 化 层 和 存储 CVM 的 虚拟 化 配置 文件 和 和 Swap 文件 ，CVM 的 虚拟 机 文件 存储 在 节点 前 置 的 SSD 盘 上 。 如 果 用 户 将 虚拟 机 存放 
{SATA DOM 盘 上 时 ，Prism 的 健康 检查 功能 将 发 现 此 异常 并 报警 ， 如 图 4-20 所 示 。 
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i DOM. 


图 4-20 SATA DOM 盘 上 存储 虚拟 机 的 报警 


4.2.3.3 ”禁用 存储 I/O 控 制 

在 vSphere 环 境 中 。 当 管理 员 创 建 存储 容器 时 ，ESXi 会 自动 启用 存储 I/O 控 制 (Storage MO Control) 功能 ，Nutanix 推 荐 关闭 此 功能 ， 因 为 使 用 此 功能 可 能 会 导致 : 
存储 功能 不 可 用 。 

" 如 果 启 用 了 此 功能 ， 可 能 会 导致 所 有 的 主机 重复 地 在 Container 根 目录 中 创建 和 删除 .iorm.sf 目 录 以 及 .lck-xxx 文 件 。 

因此 ， 建 议 管理 员 在 创建 完 容量 之 后 ， 手 动 关 闭 Storage I/O Control 功 能 。 

1) 登录 vSphere Web 客 户 端 。 

2) 点击 存储 图 标 访问 存储 。 

3) 选择 Container 并 依次 选择 管理 一 设置 一 常规 一 数据 存储 功能 。 


如 图 4-21 所 示 ，Storage I/O Control 功 能 已 经 禁用 。 
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图 4-21 禁用 Storage I/O Control 功 能 


Os 你 可 能 会 注意 到 ， 


在 Nutanix Prism 和 Nutanix sizet 工 具 里 均 使 用 TiB 作 为 数据 容量 的 单位 ，TiB 和 我 们 之 前 
1TiB>1TB。 如 图 4-22 所 示 ，2TB 转 换 成 TiB 单 位 后 ， 值 约 等 于 1.8189894035458565 TiB。 网 络 上 有 很 多 这 类 
Á: http://wintelguy.com/tb2tib-html. 


经 常 使 用 的 数据 容量 TB 有 所 不 同 ， 因 为 使 用 了 不 同 的 进 制 换算 ， 因 此 
类 的 计算 器 ， 大 家 可 以 使 用 在 线 工 具 进 行 转 换 。 图 4-22 中 的 在 线 工 具 来 


Terabyte (TB) to Tebibyte (TiB) and Gigabyte (GB) to Gibibyte (GiB) 
Converter 


Enter a number in either field, then click outside of the text box. 
TB: 2 (x 10/4 bytes) 

GB: 2000 (x 10? bytes) 

TiB: 1.8189894035458565 (x "pm bytes) 

GiB: 1862.645149230957 (x = bytes) 


图 4-22 在线 容量 计算 器 


424 数据 安全 


存储 系统 关系 到 数据 的 安全 性 ， 如 果 存 储 系统 因为 硬盘 失窃 引导 数据 泄露 ， 对 于 组 织 的 影响 可 能 是 灾难 性 的 。 


月 5 和 E > 


Nutanix 支 持 数 据 加 密 存储 的 方式 来 保证 数据 的 安全 性 ，Nutanix 支 持 纯 软件 方式 加 密 ， 也 支持 通过 自 加 密 硬盘 与 密 钥 管理 服务 器 集成 的 方案 进行 数据 加 密 ， 
了 一 种 数据 安全 配置 ， 该 配置 使 用 的 自 加 密 硬盘 (SED) 通过 单独 的 密 钥 管 理 服务 器 维护 密 钥 。Nutanix 使 用 
强大 的 安全 性 ， 如 图 4-23 所 示 。 


为 实现 这 个 目标 ，Nutanix 采 用 
ZEE (如 TCG 和 KMIP 协 议 ) 以 及 FIPS 验 证 的 SED 驱 动 器 来 实现 互 操作 性 和 


y 


Self Encrypting Drives (SED) 


图 4-23  Nutanix4k J£ Jm 82 28 44] 


采用 加 密 方式 存储 数据 时 ， 密 钥 管理 服务 器 的 安全 性 变 得 尤为 重要 。 因 此 ， 不 要 将 密 钥 管 理 服务 器 VM 托管 于 使 用 该 服务 器 的 加 密集 群 。 


4.3 网 络 规划 设计 


4.3.1 外 融合 物理 网 络 设计 


4.3.1.1 物理 网 络 连接 介绍 


在 超 融合 环境 里 ， 网 络 需要 承载 业务 流量 、 管 理 流量 和 存储 流量 ， 考 虑 到 存储 和 业务 的 响应 时 间 和 速度 ， 建 议 使 用 低 延 迟 的 万 兆 交 换 机 来 进行 网 络 传输 。Nutanix 提 供 的 超 融 合 节点 均 可 配 
置 光 口 (GbE SFP+) 以 及 电 口 (GBase-T) 的 万 兆 网 卡 ， 如 图 4-24 所 示 。 


Quad-port 10 GbE SFP+ 


Dual-port 10 GBase-T "i 


Dual-port 10 GbE SFP+ 


图 4-24 万 兆 网 卡 和 接口 


对 于 GbE SFP+ 接 口 的 网 卡 ， 如 果 需 要 连接 到 交换 机 上 的 SFP+ 接 口 时 ， 需 要 使 用 专用 的 光纤 线 统 和 模块 ， 图 4-25 就 是 一 款 已 经 集成 线 统 和 模块 的 专用 线 线 。 


图 4-25 ”集成 线 绕 和 模块 专用 线 绕 


但 是 使 用 图 4-25 中 的 线 绕 有 连接 距离 的 限制 (一般 为 3 米 ) ， 如 果 交 换 机 与 超 融 合 节 点 的 距离 超过 3 米 ， 则 需要 使 用 图 4-26 所 示 的 线 绕 (LC 接头 ) 和 专用 模块 。 


图 4-26 ”SFP+ 光 纤 线 和 模块 


对 于 GBase-T 接 口 的 网 口 (RJ45 接 头 ) 连接 万 兆 交换 机 时 ， 推 荐 使 用 七 类 网 线 ， 可 以 有 效 地 提高 网 络 传输 效率 ， 如 图 4-27 所 示 。 


图 4-27 七 类 网 线 


随 着 万 兆 以 太 网 网 络 在 数据 中 心 的 普及 ， 大 多 数 网 络 厂商 均 已 经 推出 万 兆 以 太 交 换 机 产品 ， 万 兆 以 太 网 交换 机 相 比 以 往 的 FC SAN 交 换 机 更 具有 成 本 优势 和 扩展 性 。 


通过 万 兆 网 络 交换 机 与 超 融 合 设 备 连接 ， 可 以 提供 高 速 、 低 延迟 的 网 络 。 图 4-28 是 一 个 Nutanix 设 备 与 网 络 交 换 机 互联 的 典型 连接 示意 图 。 


4.3.1.2” 超 融合 对 交换 机 的 要 求 


Nutanix 建 议 在 生产 环境 中 使 用 万 兆 以 太 网 交换 机 进行 节点 之 间 的 互联 来 保证 网 络 带 宽 可 以 满足 数据 同步 、 管 理 和 业务 需要 。 由 于 网 络 交 换 机 设备 已 经 标准 化 ， 因 此 并 没有 兼容 性 列表 之 类 
的 要 求 ， 但 是 在 超 融 合 环 境 中 建议 交换 机 满足 以 下 技术 条 件 : 


. 每 节点 配置 2~4 个 SFP+ 口 。 

: 使 用 两 个 TOR 交 换 机 来 保证 宛 余 。 

: 性 能 

` 专用 、 无 阻塞 端口 。 

+ 端口 延迟 低 。 

- 较 大 的 端口 缓冲 区 (Buffer) 。 

配置 

- 简易 性 : 要 求 支持 802.1q 的 VLAN Trunk， 主 机 传输 的 流量 负载 均衡 。 


. 性 能 和 可 用 性 : 多 交换 机 链 路 汇聚 、 主 机 的 Active-Active 绑 定 。 


- 模块 
. 如 有 可 能 ， 尽 量 使 用 交换 机 厂商 提供 的 原装 SFP+ 模 块 以 确保 兼容 性 。 


在 选择 万 兆 交 换 机 设备 时 ， 选 择 大 容量 缓冲 区 且 非 多 端口 共享 缓冲 区 的 交换 机 设备 能 够 为 超 融合 系统 提供 更 加 快速 、 稳 定 的 网 络 环境 。 我 们 以 思科 的 Nexus 2000 和 Nexus 5500 两 个 系列 的 
交换 机 为 例 ，Cisco Nexus 2232PP 交 换 机 的 缓冲 区 为 8 个 端口 共享 1280KB 的 缓冲 区 ， 每 个 端口 平均 可 使 用 160KB 的 缓冲 区 ， 在 流量 较 大 的 情况 下 ， 缓 冲 区 不 足 会 导致 端口 阻塞 。 因 此 ， 不 建议 
使 用 Nexus 2000 或 同 档次 的 交换 机 来 互联 Nutanix 节 点 。 而 同 品牌 的 Cisco Nexus 5500 交 换 机 每 个 端口 可 以 提供 640KB 的 专 有 缓冲 区 ， 就 可 以 较 轻松 地 胜任 超 融合 节点 互联 的 网 络 需要 。 
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图 4-28 Nutanix 与 Brocade 网 络 设备 连接 示意 图 


除了 交换 机 的 选择 之 外 ， 交 换 机 的 配置 和 网 络 线 绕 的 质量 也 会 对 性 能 造成 影响 。CVM 内 提供 的 iperf 工 具 可 以 用 来 测试 节点 之 间 的 网 络 性 能 ， 通 过 在 其 中 一 个 CVM 中 启用 iperf 服 务 器 端 ， 在 
另外 一 个 CVYM 上 配置 成 iperf 客 户 端 连接 到 服务 器 端 即 可 开始 测试 。 


CVM 中 启用 iperf 服 务 器 端 命令 : 


nutanix@cvmS iperf -s 


CVM 中 启用 iperf 客 户 端 命令 : 


nutanix@cvm$ iperf -c iperf 服 务 器 IP -f MB -t 60 


执行 完 上 述 的 命令 ， 等 1 分 钟 (通过 参数 -t 60 来 调整 后 即 可 显示 两 个 节点 之 间 的 网 络 融 宽 情 况 ， 如 图 4-29 所 示 ， 两 个 节点 之 间 的 网 络 市 宽 为 9.39Gbits/s。 


gp 10.21.9.29 - PuTTY = | E f g 1021932 - purty 


4-29  iperfit iX 25 


Qs 使 用 10GbE 网 络 进行 节点 互联 时 ， 通 过 ipetrf 测 试 输出 的 带宽 结果 约 为 900MBytes/s 或 者 8Gbits/s， 如 果 低 于 这 个 值 则 需要 检查 网 络 设备 是 否 有 故障 ， 以 及 网 络 设备 的 性 能 是 否 能 满 


AGE. 


4.3.1.3 ” 超 融合 交换 机 端口 模式 介绍 


根据 用 户 不 同 的 网 络 需求 ， 在 部 署 超 融 合 后 还 需要 对 网 络 设备 进行 配置 以 适应 用 户 的 需求 ， 对 交换 机 的 配置 的 主要 目的 包括 让 超 融 合 节点 的 网 络 可 以 实现 Active-Active (WE) 模式 、 
Active-Standby (=) 模式 、 设 置 Trunk 以 支持 多 VLAN、 设 置 1|PM| 接 口 所属 的 Native VLAN 等 。 接 下 来 我 们 将 针对 这 些 网 络 需求 进行 介绍 。 


对 于 非 虚拟 化 环境 ， 大 部 分 的 网 络 交换 机 的 接口 均 配 置 为 Access 模 式 ， 管 理 员 将 这 个 网 络 接口 划分 到 一 个 VLAN 之 后 ， 同 一 VLAN 的 设备 只 需要 设置 同样 网 络 段 的 I|P 地 址 即 可 通信 。 如 图 4- 
30 所 示 ， 虽 然 所 有 的 PC 均 连 接 到 同一 个 物理 交换 机 上 ， 但 是 因为 划分 了 多 个 VLAN ， 因 此 只 有 属于 同一 个 VLAN 的 设备 可 以 互通 。 在 类 似 这 样 的 网 络 情况 下 ，PC 设 备 对 应 的 网 络 接口 通常 会 设置 
成 Access (访问 ) 模式 。 


VLAN 10 VLAN 11 


图 4-30 VLAN 示 意图 
超 融 合 环境 也 提高 了 网 络 集成 化 ， 每 个 节点 上 只 需要 连接 两 根 网 络 线 缆 即 可 满足 虚拟 机 所 有 的 网 络 访问 需求 。 


对 于 小 规模 的 网 络 环境 ， 如 果 并 不 需要 划分 多 个 VLAN 来 进行 网 络 的 隔离 ， 交 换 机 的 网 络 接口 可 以 配置 为 Access 模 式 (默认 模式 ) ， 如 图 4-31 所 示 。 所 有 的 终端 以 及 虚拟 机 均 工作 在 同一 个 
网 段 内 ， 且 对 Nutanix 节 点 上 的 虚拟 化 、 管 理 接口 也 没有 网 络 分 段 要 求 ， 因 此 我 们 可 以 将 交换 机 对 应 的 网 络 接口 均 设置 为 Access 模 式 。 
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图 4-31 Access 模 式 示意 图 


对 于 IPMI 接 口 ， 因 为 其 只 是 用 于 接 入 网 络 使 用 ， 不 需要 下 联 多 个 设备 ， 因 此 ， 建 议 将 IPMI 上 联 的 交换 机 的 网 络 接口 设置 为 Access 模 式 。 


在 大 中 型 网 络 中 ， 数 据 中 心 一 般 会 划分 多 个 VLAN， 以 图 4-32 为 例 ， 管 理 员 对 应 用 服务 器 进行 分 层 ， 将 用 户 访问 的 Web 服 务 器 、 应 用 服务 器 、 数 据 库 服务 器 通过 VLAN 方 式 进行 了 逻辑 上 的 
安全 隔离 ， 将 通过 防火 墙 策略 进行 安全 保护 。 在 这 种 情况 下 ， 管 理 员 需要 将 超 融 合 节点 对 应 的 物理 交换 机 网 络 接口 设置 为 Trunk 模 式 ， 并 在 虚拟 交换 机 上 配置 端口 组 匹配 对 应 的 VLAN ID， 当 虚 
拟 机 连接 到 对 应 的 端口 组 后 ， 才 可 以 正常 工作 。 


4.3.1.4 网 络 交换 机 端口 模式 配置 


对 Trunk 和 Access 两 种 端口 模式 的 使 用 情形 有 了 了 解 ， 接 下 来 我 们 进行 交换 机 配置 的 介绍 。 
: Trunk 端口 模式 的 交换 机 配置 


针对 需要 局 用 Trunk 模 式 的 端口 ， 我 们 需要 在 交换 机 接口 上 执行 如 下 命令 。 以 下 配置 适用 于 运行 Cisco 10S 的 网 络 交 换 机 。 


interface GigabitEthernet1/1 

description Nutanix NodeA- Trunk A - NIC 0 《端口 描述 ) 

switchport trunk encapsulation dotlq (启用 dot1q 封 装 ) 

switchport trunk allowed vlan 100,200 〔 允 许 的 VLAN) 

switchport mode trunk (启用 Trunk) 

switchport nonegotiate 《〈 配 置 中 继 端口 时 ， 将 其 设置 为 nonegotiate 模 式 ) 
spanning-tree portfast trunk (在 端口 上 启用 PortFast) 


.Access 端口 模式 的 交换 机 配置 


对 于 Access 模 式 的 端口 ， 我 们 只 需要 将 交换 机 端口 类 型 更 改 为 Access 模 式 ， 同 时 设置 其 归属 的 VLAN 即 可 。 以 下 配置 适用 于 运行 Cisco 193 的 网 络 交 换 机 。 


interface GigabitEthernet1/15 

description Nutanix NodeA-port 15 〔( 端 口 描述 ) 
switchport (启用 2 层 交 换 模 式 ) 

switchport access vlan vlan ID (设置 端口 归属 的 VLAN ID) 
switchport mode access (配置 端口 为 Access 模 式 ) 
spanning-tree portfast 〈 配 置 端口 启用 PortEast) 
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E]4-32 ”Trunk 模式 示意 图 


4.3.1.5 ” 链 路 聚合 技术 


链 路 聚合 技术 是 一 种 将 多 个 交换 机 物理 端口 聚合 成 一 个 逻辑 端口 的 技术 ， 通 过 链 路 聚合 技术 可 以 提高 网 络 带宽 ， 避 免 因为 网 络 设备 、 链 路 或 超 融合 节点 上 的 网 卡 故 障 导 致 的 业务 停顿 的 问 
题 。 如 图 4-33 所 示 ， 列 出 了 两 种 常见 的 多 链 路 连接 方式 。 单 交换 机 链 路 聚合 可 以 防止 因为 链 路 、 网 卡 的 故障 导致 的 业务 影响 。 多 交换 机 链 路 聚合 方式 与 单 交换 机 链 路 聚合 方式 相 比 ， 还 可 以 规避 
交换 机 的 故障 对 业务 的 影响 。 


- 链 路 聚合 协议 介绍 


链 路 聚合 技术 ， 不 同 的 厂商 有 不 同 的 叫 法 ， 如 以 太 网 通道 、 以 太 网 中 继 、 端 口 通道 和 多 链 路 中 继 等 。 以 思科 设备 为 例 ，EtherChannel = 是 思科 的 多 链 路 捆绑 的 技术 ， 可 用 于 
交换 机 与 交换 机 之 间或 交换 机 与 服务 器 之 间 的 链 路 。 它 的 基本 原理 是 将 两 个 设备 间 多 条 相同 特性 的 物理 链 路 捆绑 在 一 起 组 成 一 条 逻辑 链 路 ， 从 而 达到 带宽 倍增 的 目的 。 除 了 可 以 增加 带 
外 ，EtherChannel 还 可 以 在 多 条 链 路 上 均衡 分 配 流量 ， 起 到 负载 分 担 的 作用 ; 当 一 条 或 多 条 链 路 故障 时 ， 只 要 还 有 链 路 正常 ， 流 量 将 转移 到 其 他 的 链 路 上 ， 整 个 转移 过 程 可 以 在 几 毫 秒 内 完 
成 ， 从 而 起 到 元 余 的 作用 ， 增 强 了 网 络 的 稳定 性 和 安全 性 。 


在 组 建 EtherChannel 的 Channel 组 时 ， 思 科 交 换 机 支持 的 协商 的 方式 包括 静态 方式 以 及 动态 协议 方式 ,支持 的 动态 协议 包括 PAgP 和 LACP。 


PAgP (端口 聚合 协议 ，Port Aggregation Protocol) 是 Cisco 私 有 的 协议 , 而 LACP (Link Aggregation Control Protocol， 链 路 聚合 控制 协议 ) 是 基于 IEEE 802.3ad 的 国际 标准 。PAgP 
和 LACP 非 常 类 似 ， 实 现 的 目标 也 相同 。 但 它们 之 间 也 存在 一 些 差异 ， 其 中 最 明显 的 一 点 就 是 PAgP 为 Cisco 专 有 产品 ， 而 LACP 是 一 种 开放 式 标准 ， 因 此 LACP 的 使 用 相对 于 PAgP 更 为 广泛 。 


除了 交换 机 层 需要 完成 EtherChannel 配 置 之 外 ， 虚 拟 化 平台 层 也 需要 提供 EtherChannel 的 支持 ， 在 VMware vSphere 5.1 版 本 之 前 ， 并 不 支持 使 用 LACP 方 式 进行 EtherChannel (只 能 使 
用 静态 模式 的 EtherChannel) 。 自 vSphere 5.1 版 本 开始 ，VMware vSphere 的 分 布 式 交换 机 开始 支持 LACP 的 EtherChannel。 


. 链 路 聚合 配置 


当 使 用 链 路 聚合 技术 时 ， 需 要 在 交换 机 上 局 用 链 路 聚合 技术 来 实现 多 个 网 口 的 聚合 。 否 则 当 一 个 服务 器 节点 的 多 个 网 口 同 时 连接 到 网 络 交换 机 时 ， 交 换 机 上 的 STP (生成 树 协议 ) 会 禁用 网 
络 连 接 以 防止 网 络 环 路 导致 故障 。 以 图 4-34 的 单 交换 机 链 路 聚合 为 例 ， 我 们 在 每 个 超 融 合 节点 上 连接 两 个 网 口 到 交换 机 ， 因 此 我 们 需要 在 交换 机 上 对 应 的 两 个 接口 上 启用 链 路 聚合 。 


蛙 交 换 机 和 链 路 聚合 多 交换 机 链 路 聚合 


IST 


图 4-33 ”和 链 路 聚合 技术 介绍 


PERE 


图 4-34 单 交换 机 链 路 聚合 示意 图 


线 


我 们 以 图 4-34 网 络 连 接 方 式 为 例 ， 假 设 节 点 1 的 两 个 网 口 连接 到 交换 机 的 1/0/1 和 1/0/2 网 络 端口 上 ， 我 们 需要 为 这 两 


- 开启 EtherChannel 


interface Port-channell (进入 Port-Channe1l11 接 口 ) 


switchport (启用 二 层 交 换 模 式 ) 


switchport trunk encapsulation dotlq (启用 dotlq 封 装 


一 


switchport trunk allowed vlan 100,200 (人 允许 的 VLAN) 


switchport mode trunk (启用 Trunk) 
switchport nonegotiate (配置 中 继 端 口 时 ， 将 


设置 为 nonegotiate) 


spanning-tree portfast trunk (在 端口 上 启用 PortFast) 


no ip address 


交换 机 1/0/1 与 1/0/2 接 口 配置 


interface range TenGigabitEthernet 1/0/1 


-2 ” (进入 接口 1/0/1 和 1/0/2 的 配置 ) 


switchport (启用 二 层 交 换 模 式 ) 


switchport trunk encapsulation dotlq (启用 dotlq 封 装 ) 


switchport trunk allowed vlan 100,200 (允许 的 VLAN) 


switchport mode trunk (启用 Trunk) 
switchport nonegotiate (配置 中 继 端 口 时 ， 将 


其 设置 为 nonegotiate) 


spanning-tree portfast trunk (在 端口 上 启用 PortFast) 


no ip address 


channel-group 1 mode on (手工 方式 强制 开启 EtherChannel) 
1 


个 端口 配置 链 路 聚合 ， 以 下 配置 适用 于 运行 Cisco 1Os 的 网 络 交换 机 。 


通过 上 面 的 配置 ， 我 们 已 经 完成 Ether-Channel 组 的 创建 ， 并 且 已 经 将 1/0/1 和 1/0/2 两 个 端口 加 入 到 channel-group 1 中 。 此 外 ， 我 们 还 在 这 两 个 接口 上 启用 了 Trunk 模 式 ， 并 允许 VLAN 
100 和 VLAN 200 的 流量 通过 。 


受 限 于 本 书 的 篇 幅 ， 有 关 在 交换 机 上 局 用 链 路 聚合 的 配置 的 内 容 ， 不 再 一 一 详 述 ， 有 兴趣 的 读者 可 以 从 网 络 广 商 了 解 详细 的 配置 步骤 和 方法 。 


. 交换 机 互联 要 求 
当 使 用 了 链 路 聚合 技术 之 后 ， 超 融合 节点 上 运行 的 虚拟 机 的 网 络 带宽 可 以 成 倍 提高。 同时 也 不 用 担心 因为 链 路 、 


绕 ， 并 且 在 交换 机 上 启用 了 链 路 聚合 技术 。 因 此 ， 


运行 在 该 节操 之 上 的 虚拟 机 将 可 以 得 到 2 倍 的 带宽 。 


交换 机 、 网 口 故障 导致 对 业务 的 影响 。 以 图 4-35 为 例 ， 因 为 同时 连接 了 两 条 


IST 


图 4-35 通过 链 路 聚合 提供 虚拟 机 的 网 络 带 宽 


介绍 完了 交换 机 与 节点 之 间 的 网 络 ， 我 们 来 看 看 交换 机 与 交换 机 之 间 的 网 络 ， 如 图 4-35 所 示 ， 我 们 在 两 个 交换 机 之 间 也 使 用 了 两 条 线 缆 来 进行 连接 。 在 实际 生产 过 程 中 ， 建 议 使 用 更 加 高 速 
的 连接 方式 来 连接 两 台 交 换 机 ， 如 使 用 交换 专用 的 级 联 线 统 或 通过 QSFP 线 线 来 连接 。 如 图 4-36 所 示 ， 思 科 交 换 机 使 用 StackWise 线 绕 进行 交换 机 之 间 的 级 联 。 


图 4-36 ”思科 StackWise 堆 又 线 绕 


在 使 用 双 万 兆 交换 机 的 场景 里 ， 建 议 交换 机 与 交换 机 之 间 的 带宽 要 高 于 各 交换 机 所 连接 端口 高 峰 时 占用 的 带宽 量 。 即 如 果 在 一 个 8 节点 的 超 融 合 环境 里 ， 每 台 交 换 机 提供 8 条 万 兆 线 纺 分 
接 到 8 台 超 融合 节点 的 情况 下 ， 每 个 节点 占用 的 高 峰 帝 宽 为 5GB， 那 么 交换 机 与 交换 机 之 间 的 互联 囊 宽 需要 至 少 为 40GB (5GBx8) 。 否 则 交换 机 之 间 的 互联 可 能 成 为 网 络 的 瓶颈 。 


此 外 ， 交 换 机 之 间 互 联 时 也 需要 考虑 到 链 路 元 余 ， 即 通过 使 用 多 条 线 统 实 现 链 路 间 的 见 余 和 聚合 。 


在 超 融 合 环境 里 ， 网 络 需要 承载 业务 流量 、 管 理 流量 和 存储 流量 ,考虑 到 存储 和 业务 的 响应 时 间 和 速度 ， 建 议 使 用 低 延 迟 的 万 兆 交 换 机 来 进行 网 络 传输 。Nutanix 提 供 的 超 融 合 节 点 均 可 配 
置 光 口 (GbE SFP+) AREO (GBase-T) 的 万 兆 网 卡 ， 如 图 4-24 所 示 。 


Quad-port 10 GbE SFP+ 


Dual-port 10 GBase-T a 


Dual-port 10 GbE SFP+ 


图 4-24 万 兆 网 卡 和 接口 


对 于 GbE SFP+ 接 口 的 网 卡 ， 如 果 需 要 连接 到 交换 机 上 的 SFP+ 接 口 时 ， 需 要 使 用 专用 的 光纤 线 比 和 模块 ， 图 4-25 就 是 一 款 已 经 集成 线 统 和 模块 的 专用 线 统 。 


图 4-25 ”集成 线 绕 和 模块 专用 线 绕 


但 是 使 用 图 4-25 中 的 线 绕 有 连接 距离 的 限制 (一般 为 3 米 ) ， 如 果 交 换 机 与 超 融 合 节 点 的 距离 超过 3 米 ， 则 需要 使 用 图 4-26 所 示 的 线 统 (LC 接头 ) 和 专用 模块 。 


图 4-26 ”SFP+ 光 纤 线 和 模块 


对 于 GBase-T 接 口 的 网 口 (RJ45 接 头 ) 连接 万 兆 交 换 机 时 ， 推 荐 使 用 七 类 网 线 ， 可 以 有 效 地 提高 网 络 传输 效率 ， 如 图 4-27 所 示 。 


图 4-27 七 类 网 线 


随 着 万 兆 以 太 网 网 络 在 数据 中 心 的 普及 ， 大 多 数 网 络 厂商 均 已 经 推出 万 兆 以 太 交 换 机 产品 ， 万 兆 以 太 网 交换 机 相 比 以 往 的 FC SAN 交 换 机 更 具有 成 本 优势 和 扩展 性 。 


通过 万 兆 网 络 交换 机 与 超 融 合 设 备 连 接 ， 可 以 提供 高 速 、 低 延迟 的 网 络 。 图 4-28 是 一 个 Nutanix 设 备 与 网 络 交换 机 互联 的 典型 连接 示意 图 。 


4.3.1.2” 超 融合 对 交换 机 的 要 求 


Nutanix 建 议 在 生产 环境 中 使 用 万 兆 以 太 网 交换 机 进行 节点 之 间 的 互联 来 保证 网 络 带 宽 可 以 满足 数据 同步 、 管 理 和 业务 需要 。 由 于 网 络 交 换 机 设备 已 经 标准 化 ， 因 此 并 没有 兼容 性 列表 之 类 
的 要 求 ， 但 是 在 超 融 合 环 境 中 建议 交换 机 满足 以 下 技术 条 件 : 


E Dre: 

. 每 节点 配置 2 一 4 个 SFP+ 口 。 

: 使 用 两 个 TOR 交 换 机 来 保证 宛 余 。 

性 能 

- 专用 、 无 阻塞 端口 。 

端口 延迟 低 。 

- 较 大 的 端口 缓冲 区 (Buffer) 。 

: 配置 

- 简易 性 : 要 求 支持 802.1q 的 VLAN Trunk， 主 机 传输 的 流量 负载 均衡 。 
` 性 能 和 可 用 性 : 多 交换 机 链 路 汇聚 、 主 机 的 Active-Active 绑 定 。 

` 模块 

如 有 可 能 ， 尽 量 使 用 交换 机 厂商 提供 的 原装 SFP+ 模 块 以 确保 兼容 性 。 


在 选择 万 兆 交 换 机 设备 时 ， 选 择 大 容量 缓冲 区 且 非 多 端口 共享 缓冲 区 的 交换 机 设备 能 够 为 超 融 合 系统 提供 更 加 快速 、 稳 定 的 网 络 环境 。 我 们 以 思科 的 Nexus 2000 和 Nexus 5500 两 个 系列 的 
交换 机 为 例 ，Cisco Nexus 2232PP 交 换 机 的 缓冲 区 为 8 个 端口 共享 1280KB 的 缓冲 区 ， 每 个 端口 平均 可 使 用 160KB 的 缓冲 区 ， 在 流量 较 大 的 情况 下 ， 缓 冲 区 不 足 会 导致 端口 阻塞 。 因 此 ， 不 建议 
使 用 Nexus 2000 或 同 档次 的 交换 机 来 互联 Nutanix 节 点 。 而 同 品牌 的 Cisco Nexus 5500 交 换 机 每 个 端口 可 以 提供 640KB 的 专 有 缓冲 区 ， 就 可 以 较 轻 松 地 胜任 超 融 合 节点 互联 的 网 络 需要 。 
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图 4-28 Nutanix 与 Btfocade 网 络 设备 连接 示意 图 


除了 交换 机 的 选择 之 外 ， 交 换 机 的 配置 和 网 络 线 纺 的 质量 也 会 对 性 能 造成 影响 。CVM 内 提供 的 iperf 工 具 可 以 用 来 测试 节点 之 间 的 网 络 性 能 ， 通 过 在 其 中 一 个 CVM 中 局 用 iperf 服 务 器 端 ， 在 
另外 一 个 CVM 上 配置 成 iperf 客 户 端 连接 到 服务 器 端 即 可 开始 测试 。 


CVM 中 启用 iperf 服 务 器 端 命令 : 


nutanix@cvmS iperf -s 


CVM 中 启用 iperf 客 户 端 命令 : 


nutanix@cvmS iperf -c iperf 服 务 器 ITP -f MB -t 60 


执行 完 上 述 的 命令 ， 等 1 分 钟 (通过 参数 -t 60 来 调整 ) ARTESA ANPALAN S, RUEIA-29B Tm, PRA TS EIER TE ?8739.39Gbits/s, 


gp 10.21.9.29 - PuTTY c» © || 2 1021.9.32 - putty 
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c 使 用 10GbE 网 络 进行 节点 互联 时 ， 通 过 ipetrf 测 试 输出 的 带宽 结果 约 为 900MBytes/s 或 者 8Gbits/s， 如 果 低 于 这 个 值 则 需要 检查 网 络 设备 是 否 有 故障 ， 以 及 网 络 设备 的 性 能 是 否 能 满 


REGE. 
4.3.1.3” 超 融合 交换 机 端口 模式 介绍 


根据 用 户 不 同 的 网 络 需求 ， 在 部 署 超 融 合 后 还 需要 对 网 络 设 备 进行 配置 以 适应 用 户 的 需求 ， 对 交换 机 的 配置 的 主要 目的 包括 让 超 融 合 节点 的 网 络 可 以 实现 Active-Active (WE) 模式 、 
Active-Standby (=) 模式 、 设 置 Trunk 以 支持 多 VLAN、 设 置 IPM1 接 口 所 属 的 Native VLAN 等 。 接 下 来 我 们 将 针对 这 些 网 络 需求 进行 介绍 。 


对 于 非 虚 拟 化 环境 ， 大 部 分 的 网 络 交 换 机 的 接口 均 配 置 为 Access 模 式 ， 管 理 员 将 这 个 网 络 接 口 划 分 到 一 个 VLAN 之 后 ， 同 一 VLAN 的 设备 只 需要 设置 同样 网 络 段 的 IP 地 址 即 可 通信 。 如 图 4- 
30 所 示 ， 虽 然 所 有 的 PC 均 连接 到 同一 个 物理 交换 机 上 ， 但 是 因为 划分 了 多 个 VLAN， 因 此 只 有 属于 同一 个 VLAN 的 设备 可 以 互通 。 在 类 似 这 样 的 网 络 情况 下 ，PC 设 备 对 应 的 网 络 接口 通常 会 设置 
成 Access (访问 ) 模式 。 


图 4-30 ”VLAN 示 意图 


超 融合 环境 也 提高 了 网 络 集成 化 ， 每 个 节点 上 只 需要 连接 两 根 网 络 续费 即 可 满足 虚拟 机 所 有 的 网 络 访问 需求 。 


对 于 小 规模 的 网 络 环境 ， 如 果 并 不 需要 划分 多 个 VLAN 来 进行 网 络 的 隔离 ， 交 换 机 的 网 络 接口 可 以 配置 为 Access 模 式 (默认 模式 ) ， 如 图 4-31 所 示 。 所 有 的 终端 以 及 虚拟 机 均 工 作 在 同一 个 
网 段 内 ， 且 对 Nutanix 节 点 上 的 虚拟 化 、 管 理 接口 也 没有 网 络 分 段 要 求 ， 因 此 我 们 可 以 将 交换 机 对 应 的 网 络 接口 均 设置 为 Access 模 式 。 
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图 4-31 Access 模 式 示 意图 


对 于 IPMI 接 口 ， 因 为 其 只 是 用 于 接 入 网 络 使 用 ， 不 需要 下 联 多 个 设备 ， 因 此 ， 建 议 将 IPMI 上 联 的 交换 机 的 网 络 接口 设置 为 Access 模 式 。 


在 大 中 型 网 络 中 ， 数 据 中 心 一 般 会 划分 多 个 VLAN ， 以 图 4-32 为 例 ， 管 理 员 对 应 用 服务 器 进行 分 层 ， 将 用 户 访问 的 Web 服 务 器 、 应 用 服务 器 、 数 据 库 服务 器 通过 VLAN 方 式 进行 了 逻辑 上 的 
安全 隔离 ， 将 通过 防火 墙 策略 进行 安全 保护 。 在 这 种 情况 下 ， 管 理 员 需要 将 超 融 合 节点 对 应 的 物理 交换 机 网 络 接口 设置 为 Trunk 模 式 ， 并 在 虚拟 交换 机 上 配置 端口 组 匹配 对 应 的 VLAN ID， 当 虚 
拟 机 连接 到 对 应 的 端口 组 后 ， 才 可 以 正常 工作 。 


4.3.1.4 网 络 交换 机 端口 模式 配置 
对 Trunk 和 Access 两 种 端口 模式 的 使 用 情形 有 了 了 解 ， 接 下 来 我 们 进行 交换 机 配置 的 介绍 。 
Trunk 端口 模式 的 交换 机 配置 


针对 需要 局 用 Trunk 模 式 的 端口 ， 我 们 需要 在 交换 机 接口 上 执行 如 下 命令 。 以 下 配置 适用 于 运行 Cisco 10S 的 网 络 交 换 机 。 


interface GigabitEthernet1/1 

description Nutanix NodeA- Trunk A - NIC 0 端口 描述 ) 

switchport trunk encapsulation dotlg (启用 dot1d 封 装 ) 

switchport trunk allowed vlan 100,200 (允许 的 VLAN) 

switchport mode trunk (启用 Trunk) 

switchport nonegotiate 《〈 配 置 中 继 端 口 时 ， 将 其 设置 为 nonegotiate 模 式 ) 
spanning-tree portfast trunk (在 端口 上 启用 PortFast) 


.Access 端口 模式 的 交换 机 配置 


对 于 Access 模 式 的 端口 ， 我 们 只 需要 将 交换 机 端口 类 型 更 改 为 Access 模 式 ， 同 时 设置 其 归属 的 VLAN 即 可 。 以 下 配置 适用 于 运行 Cisco 193 的 网 络 交 换 机 。 


interface GigabitEthernet1/15 

description Nutanix NodeA-port 15 〔 端 口 描述 ) 
switchport (启用 2 层 交 换 模 式 ) 

switchport access vlan vlan ID (设置 端口 归属 的 VLAN ID) 
switchport mode access (配置 端口 为 Access 模 式 ) 
spanning-tree portfast (配置 端口 启用 PortFast) 


40GbE 


一 一 一作 gg 一 一 一 
|] | [runk 和 模式 | | | | 
—— SB VLAN100 VLAN110 VLAN120 
| 


x © 


10GbE 


图 4-32 ”Trunk 模式 示意 图 


4.3.1.5” 链 路 聚合 技术 


链 路 聚合 技术 是 一 种 将 多 个 交换 机 物理 端口 聚合 成 一 个 逻辑 端口 的 技术 ， 通 过 链 路 聚合 技术 可 以 提高 网 络 带宽 ， 避 免 因为 网 络 设备 、 链 路 或 超 融合 节点 上 的 网 卡 故 障 导 致 的 业务 停顿 的 问 
题 。 如 图 4-33 所 示 ， 列 出 了 两 种 常见 的 多 链 路 连接 方式 。 单 交换 机 链 路 聚合 可 以 防止 因为 链 路 、 网 卡 的 故障 导致 的 业务 影响 。 多 交换 机 链 路 聚合 方式 与 单 交换 机 链 路 聚合 方式 相 比 ， 还 可 以 规避 
交换 机 的 故障 对 业务 的 影响 。 


- 链 路 聚合 协议 介绍 


链 路 聚合 技术 ， 不 同 的 厂商 有 不 同 的 叫 法 ， 如 以 太 网 通道 、 以 太 网 中 继 、 端 口 通 道 和 多 链 路 中 继 等 。 以 思科 设备 为 例 ，EtherChannel (以 太 网 通道 ) 是 思科 的 多 链 路 捆绑 的 技术 ， 可 用 于 
交换 机 与 交换 机 之 间或 交换 机 与 服务 器 之 间 的 链 路 。 它 的 基本 原理 是 将 两 个 设备 间 多 条 相同 特性 的 物理 链 路 捆绑 在 一 起 组 成 一 条 逻辑 链 路 ， 从 而 达到 带宽 倍增 的 目的 。 除 了 可 以 增加 带宽 
外 ，EtherChannel 还 可 以 在 多 条 链 路 上 均 稀 分配 流量 ， 起 到 负载 分 担 的 作用 ; 当 一 条 或 多 条 链 路 故障 时 ， 只 要 还 有 链 路 正常 ， 流 量 将 转移 到 其 他 的 链 路 上 ， 整 个 转移 过 程 可 以 在 几 毫 秒 内 完 
成 ， 从 而 起 到 元 余 的 作用 ， 增 强 了 网 络 的 稳定 性 和 安全 性 。 


在 组 建 EtherChannel 的 Channel 组 时 ， 思 科 交 换 机 支持 的 协商 的 方式 包括 静态 方式 以 及 动态 协议 方式 ,支持 的 动态 协议 包括 PAgP 和 LACP。 


PAgP (端口 聚合 协议 ，Port Aggregation Protocol) 是 Cisco 私 有 的 协议 ,而 LACP (Link Aggregation Control Protocol， 链 路 聚合 控制 协议 ) 是 基于 IEEE 802.3ad 的 国际 标准 。PAgP 
和 LACP 非 常 类 似 ， 实 现 的 目标 也 相同 。 但 它们 之 间 也 存在 一 些 差异 ， 其 中 最 明显 的 一 点 就 是 PAgP 为 Cisco 专 有 产品 ， 而 LACP 是 一 种 开放 式 标准 ， 因 此 LACP 的 使 用 相对 于 PAgP 更 为 广泛 。 


除了 交换 机 层 需 要 完成 EtherChannel 配 置 之 外 ， 虚 拟 化 平台 层 也 需要 提供 EtherChannel 的 支持 ， 在 VMware vSphere 5.1 版 本 之 前 ， 并 不 支持 使 用 LACP 方 式 进行 EtherChannel (只 能 使 
用 静态 模式 的 EtherChannel) 。 自 vSphere 5.1 版 本 开始 ，VMware vSphere 的 分 布 式 交换 机 开始 支持 LACP 的 EtherChannel。 


- 链 路 聚合 配置 


当 使 用 链 路 聚合 技术 时 ， 需 要 在 交换 机 上 局 用 链 路 聚合 技术 来 实现 多 个 网 口 的 聚合 。 否 则 当 一 个 服务 器 节点 的 多 个 网 口 同 时 连接 到 网 络 交换 机 时 ， 交 换 机 上 的 STP (生成 树 协 议 ) 会 禁用 网 
络 连 接 以 防止 网 络 环 路 导致 故障 。 以 图 4-34 的 单 交 换 机 链 路 聚合 为 例 ， 我 们 在 每 个 超 融 合 节点 上 连接 两 个 网 口 到 交换 机 ， 因 此 我 们 需要 在 交换 机 上 对 应 的 两 个 接口 上 启用 链 路 聚合 


单 交 换 机 链 路 聚合 多 人 交换 机 链 路 聚合 


IST 


图 4-33 ”和 链 路 聚合 技术 介绍 
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图 4-34 单 交换 机 和 链 路 聚合 示意 图 


我 们 以 图 4-34 网 络 连 接 方 式 为 例 ， 假 设 节点 1 的 两 个 网 口 连接 到 交换 机 的 1/0/1 和 1/0/2 网 络 端 口上 ， 我 们 需要 为 这 两 个 端口 配置 链 路 聚合 ， 以 下 配置 适用 于 运行 Cisco 10S 的 网 络 交换 机 。 


- FÈ EtherChannel 


interface Port-channell (进入 Port-Channel1 接 口 ) 

switchport ”( 启 用 二 层 交 换 模式 ) 

switchport trunk encapsulation dotlg (启用 dot1d 封 装 ) 
switchport trunk allowed vlan 100,200 (允许 的 VLAN) 
switchport mode trunk (启用 Trunk) 

switchport nonegotiate (配置 中 继 端 口 时 ， 将 其 设置 为 nonegotiate) 
spanning-tree portfast trunk (在 端口 上 启用 PortFast) 

no ip address 


: 交换 机 1/0/1 与 1/0/2 接 口 配 置 


interface range TenGigabitEthernet 1/0/1-2 (进入 接口 1/0/1 和 1/0/2 的 配置 ) 
switchport (局 用 二 层 交换 模式 ) 
switchport trunk encapsulation dotlg (启用 dot1d 封 装 ) 
switchport trunk allowed vlan 100,200 (允许 的 VLAN) 
switchport mode trunk (启用 Trunk) 

switchport nonegotiate (配置 中 继 端 口 时 ， 将 其 设置 为 nonegotiate) 
spanning-tree portfast trunk (在 端口 上 启用 PortFast) 

no ip address 

channel-group 1 mode on 〈 手 工 方式 强制 开启 EtherChanne1l) 

1 


通过 上 面 的 配置 ， 我 们 已 经 完成 Ether-Channel 组 的 创建 ， 并 且 已 经 将 1/0/1 和 1/0/2 两 个 端口 加 入 到 channel-group 1 中 。 此 外 ， 我 们 还 在 这 两 个 接口 上 启用 了 Trunk 模 式 ， 并 人 允许 VLAN 
100 和 VLAN 200 的 流量 通过 。 


受 限 于 本 书 的 篇 幅 ， 有 关 在 交换 机 上 局 用 链 路 聚合 的 配置 的 内 容 ， 不 再 一 一 详 述 ， 有 兴趣 的 读者 可 以 从 网 络 三 商 了 解 详细 的 配置 步骤 和 方法 。 
- 交换 机 互联 要 求 


当 使 用 了 链 路 聚合 技术 之 后 ， 超 融合 节点 上 运行 的 虚拟 机 的 网 络 带宽 可 以 成 倍 提高 。 同 时 也 不 用 担心 因为 链 路 、 交 换 机 、 网 口 故 障 导 致 对 业务 的 影响 。 以 图 4-35 为 例 ， 因 为 同时 连接 了 两 条 
线 绕 ， 并 且 在 交换 机 上 启用 了 链 路 聚合 技术 。 因 此 ， 运 行 在 该 节点 之 上 的 虚拟 机 将 可 以 得 到 2 倍 的 带宽 。 


IST 


图 4-35 ”通过 链 路 聚合 提供 虚拟 机 的 网 络 带宽 


介绍 完了 交换 机 与 节点 之 间 的 网 络 ， 我 们 来 看 看 交换 机 与 交换 机 之 间 的 网 络 ， 如 图 4-35 所 示 ， 我 们 在 两 个 交换 机 之 间 也 使 用 了 两 条 线 线 来 进行 连接 。 在 实际 生产 过 程 中 ， 建 议 使 用 更 加 高 速 
的 连接 方式 来 连接 两 台 交 换 机 ， 如 使 用 交换 专用 的 级 联 线 统 或 通过 QSFP 线 线 来 连接 。 如 图 4-36 所 示 ， 思 科 交 换 机 使 用 StackWise 线 绕 进行 交换 机 之 间 的 级 联 。 


图 4-36 ”思科 StackWise 堆 又 线 绕 


在 使 用 双 万 兆 交换 机 的 场景 里 ， 建 议 交换 机 与 交换 机 之 间 的 带宽 要 高 于 各 交换 机 所 连接 端口 高 峰 时 占用 的 带宽 量 。 即 如 果 在 一 个 8 节点 的 超 融 合 环 境 里 ， 每 台 交 换 机 提供 8 条 万 兆 线 线 分 别 连 
接 到 8 台 超 融合 节点 的 情况 下 ， 每 个 节点 占用 的 高 峰 帝 宽 为 5GB， 那 么 交换 机 与 交换 机 之 间 的 互联 囊 宽 需要 至 少 为 40GB (5GBx8) 。 人 否则 交换 机 之 间 的 互联 可 能 成 为 网 络 的 瓶颈 。 


此 外 ， 交 换 机 之 间 互 联 时 也 需要 考虑 到 链 路 元 余 ， 即 通过 使 用 多 条 线 统 实 现 链 路 间 的 见 余 和 聚合 。 


4.3.2 ”虚拟 网 络 设计 


在 Nutanix 集 群 当 中 ，CVM 作 为 超 融 合 的 核心 组 件 以 虚拟 机 的 方式 与 虚拟 化 层 通信 ， 通 过 虚拟 交换 机 组 件 将 CVM 与 虚拟 化 主机 进行 连接 。 


在 基于 VMware vSphere 虚 拟 化 系统 的 超 融 合 环境 中 ，Nutanix 集 群 中 的 所 有 主机 上 上 默认 会 自动 包含 两 个 虚拟 交换 机 。 如 图 4-37 所 示 ，vSwitch0 和 vSwitch-Nutanix 分 别 用 于 不 同 的 用 途 。 
vSwitch0 用 于 管理 、vMotion、 生 产 流量 。 默 认 情 况 下 ， 服 务 器 上 的 所 有 网 络 口 均 会 加 入 这 个 虚拟 交换 机 。 而 vSwitch-Nutanix 仅 用 于 CVM 与 ESXi 主 机 的 内 部 互联 ， 不 需要 上 联 任 何 物 理 网 
口 。 多 个 ESXi 之 间 的 CVM 通 过 vSwitch0 的 端口 组 通信 。 
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图 4-37  Nutanix4£ VMware vSphete 虚 拟 网 络 中 的 示意 图 
在 虚拟 化 层 使 用 AHV 时 ， 情 况 也 与 图 4-37 介 绍 的 VMware 网 络 情况 类 似 ， 如 图 4-38 所 示 。 
VMware 和 AHV 在 虚拟 机 交换 机 层面 上 的 概念 略微 不 同 。AHV 中 使 用 Open vSwitch 管 理 虚 拟 交 换 机 。 
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图 4-38 AHV 虚 拟 网 络 示意 图 


AT 


Open vSwitch (OVS) 是 一 个 开源 的 虚拟 化 交换 机 方案 ， 被 广泛 用 于 Linux Kernel 以 及 虚拟 化 环境 。 黑 认 情 况 下 ，OVs 像 一 个 


二 层 交 换 机 一 样 维护 着 一 张 MAC 地 址 表 。AHV 主 机 以 及 虚拟 
机 通过 虚拟 端口 连接 到 OVS 交 换 机 上 。 


OVS 支 持 多 种 交换 机 特性 ， 如 VLAN 标 记 、 负 载 均 衡 、 链 路 聚合 (LACP) ， 每 一 个 AHV 主 机 维护 着 一 个 OVS 实 例 ， 所 有 的 OVS 实 例 合并 成 单一 的 逻辑 交换 机 .。 


Bridges 用 于 虚拟 交换 机 去 管理 物理 接口 与 虚拟 网 络 接口 之 间 的 流量 。AHV 上 默认 配置 已 经 包括 了 一 个 叫 作 br0 的 OVS Bridge 以 及 一 个 叫 作 Virbr0 的 本 地 Linux Bridge。Virbr0 用 于 连接 CVM 
和 AHV 主 机 之 间 的 管理 流量 。 其 他 的 流量 如 存储 、 主 机 和 虚拟 机 网 络 流量 均 通过 br0 bridge 进 出 。AHV 主 机 、 虚 拟 机 和 物理 网 卡 使 用 Port 连 接 到 OVS Bridge. 


Port 是 Bridge 上 的 一 个 逻辑 部 件 ， 用 于 连接 到 虚拟 交换 机 上 。Nutanix 使 用 多 种 Port 类 型 ， 如 internal、tap、VXLAN 和 Bond。 
- internal port: 与 默认 的 bridge 同 名 ( 即 br0) ， 用 于 访问 AHV 主 机 。 

: Tap port: 用 于 连接 虚拟 机 的 虚拟 网 卡 。 

- VXLAN port: 用 于 AHV 提 供 的 IPAM (IP 地 址 管理 功能 ) 。 


: Bond port: 提供 AHV 主 机 上 的 多 个 物理 网 口 的 端口 聚合 使 用 。 


Bond port 用 于 聚合 AHV 主 机 上 的 多 个 物理 网 口 。 默 认 配 置 下 ，br0 bridge 上 已 经 有 一 个 叫 作 br0-up 的 Bond， 这 个 Bond 上 已 经 绑 定 了 所 有 的 物理 网 口 。 可 通过 manage _ovs 命 令 进 行 重 命 


表 4-8 为 VMware 与 AHV 虚 拟 网 络 的 术语 参照 表 。 


表 4-8 VMware RAHV È M A h RER ERK 


VMware 术语 AHV 术语 
vSwitch (分 布 式 交 换 机 ) Bridge 
网 卡 组 Bond 
rg L1 Port 
ig O ZH Network 
上 联 口 Uplink 
VMkernel Port Internal Port 
Active-Standby Active-Backup 
基于 源 MAC 路 由 及 基于 物理 网 卡 负载 路 由 《两 者 合并 ) Balance-slb 
LACP 和 基于 IP 哈 硕 的 路 由 LACP with balancetcp 


受 限于 本 书 的 篇 幅 ， 我 们 将 重点 介绍 VMware vSphere 和 AHV 两 个 虚拟 化 平台 。 对 于 Microsoft Hyper-V 以 及 XenServer 的 网 络 不 再 一 一 详 述 ， 读 者 可 以 通过 Hypervisor 厂 商 的 官网 获得 其 
虚拟 网 络 的 详细 介绍 。 


4.3.2.1 基于 vSphere 的 超 融 合 网 络 


- VMware 虚拟 交换 机 介绍 


在 VMware 虚 拟 化 平台 中 ， 提 供 了 标准 交换 机 与 分 布 式 交 换 机 两 种 虚拟 交换 机 来 实现 网 络 连接 功能 。Nutanix 超 融合 可 以 支持 以 上 两 种 虚拟 交换 机 配置 ， 通 过 Nutanix Foundation 工 具 部 
署 完 成 的 Nutanix 超 融合 环境 默认 使 用 标准 交换 机 进行 网 络 互 通 。 


标准 交换 机 与 分 布 式 交换 机 在 功能 上 存在 一 些 差 异 ， 部 分 高 级 的 网 络 功 能 只 能 在 使 用 分 布 式 交换 机 的 情况 下 才 可 用 。 表 4-9 列 出 了 VMware 标 准 交 换 机 与 分 布 式 交 换 机 的 功能 区 别 。 


表 4-9 虚拟 交换 机 功能 对 比 


交换 机 类 型 网络 10 控制 | SRONE REO LACP 


* FEF UR Mm EI ID 的 路 由 


。 基 于 IP "ER H 
。 基 于 源 MAC 哈 希 的 路 由 
。 基 于 明确 故障 切换 顺序 


* 基于 源 虚 拟 端 口 ID 的 路 由 
© 基于 IP 哈 希 的 路 由 
分 布 式 交 换 机 | vCenter Server 文 持 文 持 。 基 于 源 MAC 哈 希 的 路 由 ”| 支持 ”| 文 持 
© 基于 明确 故障 切换 顺序 
。 基 于 物理 网 卡 负载 的 路 由 


通过 表 4-9 可 知 ， 当 使 用 LACP 技 术 实 现 多 链接 聚合 时 ， 人 在 VMware vSphere 上 需要 使 用 分 布 式 交 换 机 才 可 以 文 持 HACP。 对 于 使 用 标准 交换 机 的 环境 ， 仪 文 持 使 用 静态 方式 启用 链 路 聚合 。 


标准 交换 机 单机 或 vCenter Server 不 支持 


VMware 虚 拟 交 换 机 的 配置 


链 路 聚合 在 交换 机 需要 使 用 手工 方式 启用 ， 标 准 虚拟 交换 机 上 的 端口 组 上 也 需要 进行 配置 修改 ， 如 图 4-39 所 示 ， 通 过 在 虚拟 交换 机 上 修改 网 卡 绑 定 属性 中 的 负载 平衡 策略 为 基于 IP 哈 希 的 路 
由 ， 可 以 实现 在 虚拟 化 层 提 供 链 路 聚合 的 支持 。 
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图 4-39 ”负载 平衡 策略 
表 4-10 总 结 了 静态 和 动态 (XESEIRLACP) 链 路 聚合 时 的 虚拟 交换 机 配置 及 支持 场景 。 在 配置 超 融 合 环境 中 的 网 络 时 可 供 参 考 。 


表 4-10 ”和 链 路 聚合 时 的 虚拟 交换 机 配置 及 支持 场景 


选 项 vSphere 标准 交换 机 vSphere 分 布 式 交换 机 
LACP 支持 
静态 链 路 聚合 技术 支持 


静态 链 路 聚合 技术 时 的 负载 平衡 策略 基于 IP 哈 硕 的 路 由 基于 IP 哈 希 的 路 由 


En - 5.1 分 布 式 交换 机 仅 支 持 基于 IP 哈 希 的 路 
LACP 时 的 负载 平衡 策 IN SAF betel pha 
E EAE A 由 ，5.5 及 之 后 分 布 式 交换 机 支持 所 有 策略 


-网络 MO 控制 介绍 


在 基于 三 层 架 构 的 虚拟 化 环境 中 ， 通 常 通过 采用 多 块 网 卡 、 专 用 的 人 存储 链 路 来 满足 网 络 流量 隔离 的 要 求 ; 在 超 融 合 环境 里 ， 因 为 采用 了 高 速 的 万 兆 网 络 ， 因 此 不 再 需要 使 用 多 块 网 卡 来 进行 
物理 分 隔 ， 而 是 通过 网 络 /O 控 制 的 方式 来 进行 网 络 市 宽 的 分 离 。 


在 Nutanix 超 融合 环境 里 ， 每 个 节点 至 少 配置 了 两 个 万 兆 网 口 ， 用 于 提供 高 性 能 的 网 络 传输 并 保证 安全 元 余 ， 通 过 在 分 布 式 交换 机 上 启用 网 络 |/O 控 制 可 以 进行 多 种 网 络 流量 的 分 隔 ， 如 图 
4-40 所 示 。 


Era) VLAN 管理 VLAN vMotion VLAN Nutanix CVM 
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图 4-40 ”vSphere 网 络 设计 


- 


-网络 MO 控制 最 佳 实践 
通过 vsSphere 分 布 式 交 换 机 内 提供 的 网 络 MO 控 制 可 以 按照 QoS 要求 进 行 各 种 流量 的 优先 级 设 定 ， 在 物理 服务 器 的 网 络 连 线 上 提供 了 简化 。 如 表 4-11 所 示 ，Nutanix 推 荐 对 超 融 合集 群 中 的 各 
种 流量 进行 了 带宽 和 份额 设 定 ， 以 确保 业务 、 存 储 流量 优先 通过 。 


表 4-11 网 络 I/O 控 制 配 置 建议 


网 络 资源 池 份额 

管理 流量 25 
VMotion 流量 EX 50 
FT 流量 正常 50 
TIENS 高 100 
NFS 流量 局 di, 
Nutanix CVM 流量 5 高 100 
iSCSI 流量 à 100 

QD 需要 通过 手工 创建 网 络 资源 池 生 成 

- 使 用 vSphere 时 的 网 络 配 置 推荐 


在 不 使 用 链 路 聚合 的 网 络 环境 里 ， 不 需要 对 网 络 交换 机 进行 任何 的 配置 修改 。 我 们 只 需要 在 虚拟 交换 机 上 修改 网 卡 绑 定 属性 中 的 负载 平衡 策略 为 基于 源 虚 拟 端口 iD 的 路 由 (默认 选项 ) 、 基 
于 源 MAC 哈 希 的 路 由 或 基于 明确 故障 切换 顺序 三 种 中 的 任意 一 种 ， 几 种 负载 平衡 策略 之 类 的 介绍 ， 可 参考 表 4-12。 


表 4-12 负载 平衡 策略 选项 的 描述 


选项 描述 是 否 需要 修改 交换 机 配置 
根据 流量 进入 标准 交换 机 所 经 过 的 虚拟 端口 选择 上 


基于 源 虚拟 端口 ID 的 路 由 on ff 
行 链 路 
根据 每 个 数据 包 的 源 和 目标 IP 地 址 哈 希 选择 上 行 

基于 IP 哈 希 的 路 由 BERE. XY FAR IP 数据 包 ， 偶 移 量 中 的 任何 值 都 将 用 是 
于 计算 哈 希 值 

基于 源 MAC 哈 希 的 路 由 根据 源 以 太 网 哈 布 选择 上 行 链 路 ff 


ATA “Yoh car” Sse Pie Tae Bu 50 AY wei at 
故障 切换 检测 标准 的 上 行 链 路 
以 基于 源 虚 拟 奖 口 的 路 由 为 基础 ， 其 中 虚拟 交换 机 
基于 物理 网 卡 负载 的 路 由 将 检查 上 行 链 路 的 实际 负载 ， 并 采取 措施 以 减少 过 载 ff 
上 行 链 路 上 的 负载 。 仅 适用 于 vSphere 分 布 式 交换 机 


基于 明确 故障 切换 顺序 


在 超 融合 环境 里 ， 对 于 不 同 的 虚拟 交换 机 类 型 ， 可 采用 表 4-13 中 的 绑 定 与 故障 配置 ， 对 于 以 下 的 两 种 配置 ， 均 无 须 更 改 物理 交换 机 的 配置 。 


表 4-13 ”Nutanix 虚 拟 网 络 交换 机 推荐 配置 


标准 交换 机 
负载 平衡 基于 源 端口 ID 的 路 由 
网 络 故 障 切 换 检测 仅 链 路 状态 
通知 交换 机 是 
故障 恢复 是 
分 布 式 交 换 机 
负载 平衡 基于 物理 网 卡 负载 的 路 由 (LBT) 
网 络 故 障 切 换 检测 是 
通知 交换 机 是 
故障 恢复 否 


4.3.2.2 ”基于 AHV 的 超 融 合 网 络 

-虚拟 交换 机 介绍 

与 VSphere 虚 拟 交换 机 类 似 ，AHV 提 供 的 虚拟 交换 机 也 同样 支持 多 种 负载 平衡 工作 模式 。OVS 中 的 bond 支 持 多 种 负载 平衡 模式 ， 包 括 ( 主 备 ) Active-Backup、Balance-slb (基于 MAC 地 
址 路 由 ) 、Balance-tcp (基于 TCP 路 由 ) 。 管 理 员 也 可 以 使 用 LACP 去 聚合 物理 交换 机 上 的 链 路 。 如 表 4-14 所 示 ， 使 用 AHV 时 主要 使 用 以 下 几 种 模式 。 


表 4-14 AHV 多 网 卡 的 负载 平衡 策略 


选项 是 否 需要 修改 交换 机 配置 

只 有 一 个 网 口 提供 网 络 服务 ， 另 外 一 个 网 口 处 于 备用 

Active-Backup ( 主 备 模式 ) | 状态 。 双 10GB 的 节点 上 提供 10GB 的 流量 ， 单 个 虚拟 
机 最 大 的 否 吐 量 为 10GB 

基于 虚拟 机 的 源 地 址 哈 希 选择 上 行 链 路 。 双 10GB 的 

节点 上 提供 20GB 流量 ,但 单个 虚拟 机 最 大 的 否 吐 量 为 否 


Balance-slb ( MAC 流量 负 
RFM) 


10GB 
LACP with Balance-tcp| 基于 虚拟 机 TCP 流量 的 目 动 负载 平衡 ， 单 个 虚拟 机 
(TCP 负载 平衡 ) 最 大 的 行 吐 量 为 20GB 


要 求 配置 LACP 
主 备 模式 与 VMware 的 使 用 明确 故障 切换 顺序 策略 类 似 ， 如 图 4-41 所 示 ， 超 融合 节点 上 连接 的 两 个 网 卡 ， 一 个 处 于 活动 状态 ， 另 外 一 个 处 于 备用 状态 。 当 活动 的 网 卡 (eth3) 、 链 路 出 现 故 
障 后 ， 备 用 的 网 卡 (eth2) 会 自动 进行 网 络 接 管 。 主 备 模式 是 AHV_ 上 OVS 的 默认 配置 。 
©). MEN i 
襄 明 ”可 通过 以 下 命令 修改 多 网 卡 为 主 备 模式 (需要 在 每 个 CVM 中 执行 ) : 


nutanix@CVM$ ssh root@192.168.5.1 "ovs-vsctl set port bond0 bond mode-active-backup" 


Balance-slb 模 式 是 基于 MAC 流 量 的 负载 均衡 模式 ， 类 似 VMware 虚 拟 交换 机 中 的 基于 源 MAC 哈 希 的 路 由 策略 ， 即 按照 MAC 地 址 来 选择 上 行 链 路 ， 如 图 4-42 所 示 。 
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图 4-42  Balance-slIb 5& 9&- 


Lal 
© 可 通过 以 下 命令 修改 多 网 卡 为 基于 MAC 流 量 和 负载 平 衡 模式 (需要 在 每 个 CVM 中 执行 ) : 


nutanix@CVMS$ ssh root@192.168.5.1 "ovs-vsctl set port bond0 bond mode- balance-slb" 
nutanix@CVMS ssh root@192.168.5.1 "ovs-vsctl set port bond0 other conf ig:bond-rebalanceinterval-60000" 


Balance-tcp 模 式 基 于 TCP 流 来 进行 负载 平衡 ， 如 图 4-43 所 示 ，VM 1 发 送 的 80 和 443 端 口 的 流量 会 通过 不 同上 联网 卡 分 发 。 与 Active-Backup 及 Balance-slb 模 式 不 同 ，Balance-tcp 模 式 要 
求 上 联 的 交换 机 端口 上 配置 LACP 的 端口 聚合 。 
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图 4-43 LACP with Balance-tcp 负 载 平衡 策略 


rij. 
6, 可 通过 以 下 命令 修改 多 网 卡 为 基于 LACP 的 TCP 负 载 平衡 模式 〈 需 要 在 每 个 CVM 中 执行 ) : 


nutanix@CVMS ssh root@192.168.5.1 "ovs-vsctl set port bond0 lacp-active" 
nutanix@CVMS ssh root@192.168.5.1 "ovs-vsctl set port bond0 bond mode- balance-tcp" 


- AHV 网 络 可 视 化 


如 果 网 络 配置 不 正确 ， 在 超 融 合 节点 上 运行 的 虚拟 机 则 不 能 正常 工作 ， 而 出 现 网 络 故障 的 原因 可 能 很 多 ， 如 网 络 链 路 中 断 、 虚 拟 机 连接 的 VLAN 不 正确 、 虚 拟 交 换 机 的 网 络 负载 平衡 策略 或 
交换 机 配置 不 正确 等 。 


通过 网 络 可 视 化 可 以 帮助 管理 员 快 速 定 位 网 络 问题 。 图 4-44 展 示 了 虚拟 机 、 主 机 、TOR 网 络 交换 机 之 间 的 网 络 连 接 视 图 。 


如 果 用 户 希 望 在 网 络 可 视 化 功能 中 查看 超 融 合 节点 到 TOR 交 换 机 的 网 络 连 接 、 带 宽 信息 ， 需 要 对 物理 交换 机 进行 配置 。 具 体 的 配置 要 求 如 下 : 


: 为 TOR 交 换 机 局 用 LLDP 或 CDP。 网 络 可 视 化 工具 使 用 LLDP 或 CDP 来 发 现 连接 的 交换 机 ， 并 了 解 TOR 交 换 机 侧 的 连接 信息 。 
- 为 TOR 交 换 机 启用 SNMP v3 或 SNMP v2。 网 络 可 视 化 工具 使 用 SNMP 从 交换 机 获取 实时 使 用 率 统计 数据 。 

目前 Nutanix 的 网 络 可 视 化 功能 主要 支持 以 下 的 交换 机 型 号 : 

Cisco Catalyst 系 列 交 换 机 

- Cisco Nexus 系 列 交换 机 

: Dell 交换机 


- Arista X 挽 机 


管理 员 可 以 通过 配置 菜单 中 的 网 络 交换 机 配置 功能 ， 设 置 主机 连接 的 TOR 交 换 机 。 在 界面 中 ， 管 理 员 需 要 提供 交换 机 的 管理 IP、SNMP 版 本 、SNMP 用 户 名 等 信息 ， 如 图 4-45 所 示 。 
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图 4-44 ”网 络 连接 视图 


Configure one or more network switches for stats collection. 


Switch Configuration SNMP Profile 
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图 4-45 ”网 络 交 换 机 设置 
ic eese uaa 
注意 网络 可 视 化 功能 目前 仅 在 AHV 为 基础 的 超 融 合集 群 中 可 用 。 
- |P 地 址 管理 (IPAM) 


IPAM (IP 地 址 管理 ) 是 由 Nutanix 提 供 的 用 于 进行 IP 地 址 管理 的 网 络 组件 ， 通 过 提供 DHCP 服 务 器 功能 为 虚拟 化 环境 提供 自动 的 IP 地 址 分 配 ， 如 图 4-46 所 示 。 
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ENABLE IP ADDRESS MANAGEMENT 


This gives Acropolis control af IP address assignments within the network. 


NETWORK IP ADDRESS / PREFIX LENGTH 
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图 4-46 IPAM d 


IPAM 提 供 的 PHCP 功 能 ， 由 OVs 的 VxLAN 功 能 提供 ， 因 此 不 需要 管理 员额 外 安装 DHCP 服 务 器 以 及 修改 交换 机 配置 ， 而 且 配 置 过 程 非 铝 简单 易 用 。 


机 的 场景 使 用 。 


ry. . = E: : 
Oy 此 功能 仅 在 使 用 AHV 虚 拟 化 平台 时 可 用 ， 其 他 虚拟 化 系统 需要 使 用 第 三 方 的 DHCP 服 务 器 方案 才 可 以 实现 此 功能 。 


Cancel 


特别 适合 如 虚拟 桌面 这 样 的 有 大 量 虚 拟 


: 使 用 AHV 时 网 络 配置 推荐 
在 使 用 AHV 的 超 融合 环境 里 ， 我 们 建议 使 用 以 下 的 网 络 设置 来 进行 网 络 的 优化 配置 。 
- Open vSwitch 
© 不 要 修改 OVS 默 认 的 OVS Bridge br0，AHV 主 机 、CVM 依 赖 br0 工 作 。 
- 虽然 可 以 手动 设置 并 应 用 QoS 策略 到 虚拟 机 的 tap 接 口上 (使 用 ovs-vsctl 命 令 ) ， 但 是 不 推荐 使 用 。 
- 不 要 删除 或 重 命名 OVS bridge br0。 
. 不 要 修改 本 地 Linux bridge virbr0。 
- OVS bond 
- 连接 10GB 的 网 络 到 物理 交换 机 上 ， 并 使 用 默认 的 OVS Bond bond0， 并 在 交换 机 上 配置 Trfunk。 
. 使 用 主 备 模式 的 负载 平衡 策略 ， 除 非 你 有 特别 的 需要 才 配 置 Balance-slb 或 LACP with Balance-tcp。 


” 当 需 要 同时 使 用 10GB 和 1GB 网 卡 时 ， 先 将 1GB 网 卡 从 Bond0 中 移 除 ， 然 后 创建 一 个 新 的 Bond 专 门 用 于 放置 1GB 网 卡 ， 如 图 4-47 所 示 。 


zz e 


Physical Switch1 Physical Switch2 


图 4-47 创建 多 个 bond 来 隔离 网 络 流量 


- 如 果 只 使 用 10GB 网 络 来 实现 AHV 主 机 和 业务 网 络 的 互联 ， 网 络 上 不 需要 做 任何 修改 ， 如 图 4-48 所 示 。 
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图 4-48 AHV 上 默认 的 OVS 配 置 


| 不 要 在 一 个 bond 中 使 用 不 同 速率 的 网 卡 ， 如 10GB 和 1GB 均 放 在 同一 个 bond 中 。 

- 当 虚 拟 机 需要 使 用 到 链 路 聚合 时 才 用 LACP with Balance-tcp ， 在 配置 AHV 使 用 LACP with Balance-tcp 前 ， 需 要 先 在 物理 交换 机 上 配置 好 LACP。 
物理 网 络 

. 建议 采用 Leaf-Spine (HÄ MARA) 拓扑 组 网 中 ， 使 用 完 余 的 机 架 交换 机 连接 超 融合 节点 。 

所 有 的 超 融合 节点 均 属 于 同一 个 2 层 网 络 中 。 

` 如 果 需 要 增 大 东西 向 流量 ， 可 通过 添加 Spine 交 换 机 的 方式 来 实现 。 

` 使 用 宛 余 的 40Gbps (或 更 快 ) 的 链 路 来 实现 交换 机 的 互联 ， 确 保 交 换 机 之 间 有 足够 的 带宽 。 

- 上 联 物理 交换 机 的 要 求 

- 连接 AHV 主 机 上 的 10GB 的 上 联 端 口 到 高 速 、 无 拥塞 的 数据 中 心 级 交换 机 。 

` 使 用 低 延 迟 、 高 速 的 以 太 网 交换 机 确保 可 预测 、 稳 定 的 延迟 。 

: 在 AHV 主 机 连接 的 交换 机 上 使 用 快速 收敛 的 技术 (如 Cisco PortFast) 。 

` 交换 机 与 主机 VLAN 

: 保持 CVM 和 AHV 在 同一 个 VLAN 中 ， 默 认 CVM 和 AHV 主 机 均 被 指定 到 VLAN 0， 除 非 网 络 管理 员 在 交换 机 上 配置 了 Native VLAN. 
: 配置 交换 机 上 的 AHV 对 应 的 端口 为 Trunk 端 口 。 

` 为 AHV 和 CVM 划 分 专用 的 VLAN。 

- 虚拟 机 VLAN 

+ 使 用 Prism 界 面 进行 虚拟 机 网 络 的 管理 。 

: AHV/CVM 网 络 不 提供 给 虚拟 机 网 络 使 用 。 

" 如 果 使 用 多 个 bridge， 可 以 使 用 aCLI 方 式 进行 虚拟 机 网 络 的 创建 ， 并 指定 bridge 信 息 。 

: CVM 网 络 配置 


- 不 要 删除 OVS bridge br0 Sx Native Linux bridge vitbt0 ， 如 需 分 离 CVM 管 理 和 存储 的 网 络 流量 ， 可 参考 Nutanix 官 方 相关 指南 进行 操作 。 


- Jumbo frame BG 3E 

- Nutanix 不 推荐 在 AHV 环 境 中 使 用 jumbo frames, 34 MTU 41500 byte 改 到 9000byte 的 网 络 性 能 提升 并 不 明显 。 
- IP 地 址 管理 (IPAM) 

- 使 用 IPAM 时 ， 配 置 IP 地 址 池 ， 防 止 网 络 地 址 与 DHCP 地 址 池 重 有 登 。 

- IPMI 端 口 


` 不 要 在 IPMI 接 口上 使 用 Trunk 模 式 ， 在 IPMI 接 口上 使 用 Access 模 式 会 更 简单 。 因 为 通常 IPMI 接 口 不 需要 使 用 多 个 VLAN。 


4.3.3 ”CVM 的 网 络 连 接 


4.3.3.1 基于 vSphere 的 CVM 网 络 连接 介绍 


CVM 在 Nutanix 集 群 中 扮演 着 大 脑 的 作用 ，CVM 需 要 承担 分 布 式 存储 服务 ，Prism 管 理 等 角色 。 因 此 ，CVM 的 网 络 设置 至 关 重 要 。 如 图 4-49 所 示 ， 我 们 可 以 看 到 两 个 虚拟 交换 机 即 
vSwitch0 以 及 vSwitchNutanix。CVM 同 时 配置 了 两 个 网 卡 ， 分 别 连 接 到 VM Network 和 svm-iscsi-pg 端 口 组 。 


在 每 个 Nutanix 节 点 上 ， 均 会 在 ESXi 主 机 上 配置 一 个 192.168.5.1 的 内 部 地 址 (vSwitchNutanix 虚 拟 交换 机 上 的 vmk-svm-iscsi-pg 的 vmk1 接 口 ) ， 同 时 在 每 个 CVM 上 自动 配置 192.168.5.2 
以 及 192.168.5.254 的 内 部 网 络 地 址 (CVM 的 eth1 和 eth1 : 1 接口 ) ， 实 现 CVM 与 虚拟 化 主机 的 内 部 互通 (因此 不 需要 上 联 物理 网 口 ) 。 


View:  vSphere Standard Switch vSphere Distributed Switch 


Standard Switch: vSwitchNutanix Remove... Properties... 
Networking ful Machine Port Genam "-—— P" — 
Standard Switch: vSwitch0 Remove... Properties... VJ svm-iscsi-pg e No adapters 
Virtual Machine Port Gr * Physical Adapters [-] d virtual machine(s) 
[3 VM Network e. x ER vmnicü stand by = linux07 EÈ 
[3 8 virtual machine(s) x UB vmnici stand by L] linux04 E 
linux10 E x E vmnic3 stand by L- linux09 E 
linux05 id eU vmnic2 10000 Full {a NTNX-155M65450323-A-CVM "b 
linux08 CD "rpm 
linux03 eu L3 wmk-svm-iscsi-pg e 
linux06 a neers LT 
[ 4 122.100.2.1 
linux02 chu 
linux01 chu 
NTNX-155M65450323-A-CVM (d 
L3 Management Network e 


C C 


图 4-49 ”由 Nutanix 自 动 创 建 的 两 个 vSwitch 


在 ESXi 上 ， 超 融合 节点 上 的 所 有 网 卡 (BRIPMI) 均 会 自动 加 入 vSwitch0 虚 拟 交 换 机 。 但 是 因为 10GB 网 卡 和 和 1GB 网 卡 均 会 加 入 到 同一 个 端口 组 中 ， 因 此 ， 不 建议 同时 连接 10GB 和 1GB 网 
卡 。 如 果 需 要 同时 使 用 10GB 和 1GB 的 网 卡 ， 需 要 修改 vSwitch0 的 配置 ， 即 将 10GB 和 1GB 用 于 不 同 的 网 络 端口 组 。 


网 络 交换 机 和 网 卡 的 故障 、 网 络 线 缆 质 量 等 都 会 影响 到 网 络 的 传输 性 能 ， 人 在 ESXi 主 机 上 可 以 通过 esxtop (执行 后 输入 n 进 行 网 络 视图 ) 命令 查询 。 


如 图 4-50 所 示 ， 可 以 了 解 主 机 上 各 个 网 卡 、vSwitch 的 运行 情况 ， 管 理 员 可 以 了 解数 据 包 的 发 送 (PKTTX/s) 、 接 收 (PKTRX/s) 、 丢 包 率 (%DRPTX 和 %DRPRX) 等 信息 。 
4.3.3.2 ”基于 AHV 的 CVM 网络 连 接 介绍 


在 AHV 的 默认 配置 下 ， 超 融合 节点 上 的 所 有 了 网卡 (IPMI 接 口 例外 ) 均 会 自动 加 入 同一 bond。 对 于 大 部 分 的 用 户 环境 来 说 ， 可 能 只 会 使 用 两 个 10GB 网 口 (在 修改 bond 之 前 ， 不 要 同时 插 接 
1GB 和 10GB 网 卡 ) ， 因 此 ， 这 种 默认 配置 可 以 适用 于 大 部 分 用 户 的 使 用 场景 。 默 认 的 交换 机 配置 如 图 4-51 所 示 。 


与 ESXi 主 机 上 的 虚拟 交换 机 配置 类 似 ， 在 AHV 环 境 里 CVM 的 两 个 虚拟 网 卡 也 同时 连接 到 主机 Bridge virbr0 和 OVS bridge br0， 并 在 CVYM 上 配置 了 两 个 不 同 的 IP 地 址 段 ， 即 管理 IP (CVM 
的 eth0 接 口 ) 以 及 仅 限 内 部 使 用 的 192.168.5.2 (CVM 的 eth1 接 口 ) 和 192.168.5.254 (CVM 的 eth1 : 1 接口 ) 这 两 个 私有 IP 地 址 。 
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图 4-50 ”esxtop 网 络 视 图 


Internal VLAN 
aa 
Sass H Other VLANs 


{ Linux 
| Bridge 


ee ‘u 


Acropolis * 
Hypervisor 


451 AHV 黑 认 的 OVS 配 置 


4.3.4 NTP&s 


4.3.4.1 NTP 介 绍 


分 布 式 系统 相 比 集中 式 系 统 在 数据 同步 方面 更 加 复杂 ， 分 布 式 系统 依赖 分 布 式 算法 、 多 节点 共同 运算 来 实现 ， 但 是 决策 却 依赖 本 地 人 信息。 因此， 时 间 截 在 整个 集群 中 起 到 保证 各 个 节点 之 间 
数据 同步 的 作用 。Nutanix 作 为 一 套 分 布 式 系统 也 具有 相同 的 特质 ，CVM 是 整个 Nutanix 集 群 的 大 脑 ，CVM 内 的 算法 通过 网 络 与 其 他 节点 之 上 的 CVM 通 信 ， 实 现 数据 的 同步 。 因 此 ,在 
Nutanix 系 统 中 也 同样 对 时 间 管 理 有 一 定 的 要 求 。 


如 果 时 间 不 同步 ， 系 统 在 数据 同步 时 出 现 错误 ， 可 能 导致 以 下 的 问题 : 
: Hypet-V 主 机 在 加 入 域 时 ， 如 果 时 间 差 大 于 5 分 钟 ， 加 入 域 的 操作 将 会 失败 。 
- 备份 软件 如 Veeam 在 备份 文件 时 会 同步 Hypervisor 和 CVM 的 时 间 ， 以 决定 哪些 文件 需要 备份 。 
Prism 中 的 性 能 数据 、 事 件 等 都 依赖 时 间 ， 如 果 时 间 不 准确 ， 在 故障 处 理 时 影响 技术 人 员 定 位 故障 原因 。 
: Prism 中 的 图 表 也 依赖 时 间 ， 各 系统 之 间 时 间 车 不 统一 ， 图 表 的 数据 无 法 正确 显示 。 
- 在 进行 多 站 点 DR 时 ， 快 照 的 过 期 设置 和 执行 计划 也 依赖 准确 的 时 间 同 步 ， 否 则 快照 过 期 可 能 会 过 快 或 过 慢 。 
在 没有 使 用 NTP 之 前 ， 计 算 机 的 时 间 信 息 由 主板 心 片 提 供 ， 但 是 如 果 因 为 主板 的 电池 掉 电 等 原因 ， 那 么 系统 的 时 间 和 真实 时 间 之 间 可 能 就 会 存在 差异 。 


网 络 时 间 协 议 (NTP) 是 一 种 计算 机 之 间 的 时 钟 同步 协议 ， 使 用 NTP 方 式 可 以 有 效 地 保证 各 网 络 设 备 之 间 使 用 的 是 同一 个 时 间 。Nutanix 推 荐 使 用 NTP 协 议 来 自动 同步 Nutanix 集 群 与 外 界 
的 时 间 服 务 器 通信 。 


4.3.4.2 NTP 设 定 


在 Nutanix 集 群 的 配置 菜单 中 ， 可 以 图 形 化 方式 设置 NTP 服 务 器 ， 如 图 4-52 所 示 。 


Configure one or more NTP servers that you would like to use. 


Servers that have been configured are displayed below. 


time.nist.qgov 


图 4-52 NTP 服 务 器 设置 


通过 图 4-52 的 设置 ， 所 有 AHV 主 机 的 NTP 时 间 服 务 器 将 指定 到 指定 的 NTP 服 务 器 地 址 (如 果 是 VMware 环境 ， 需 要 在 vsSphere Client 中 给 每 个 ESXi 主 机 指定 NTP 服 务 器 地 址 ) 。 集 群 中 的 
CVM 也 会 使 用 上 述 的 NTP 设 置 ， 但 是 只 有 Genesis Leader 角 色 的 CVM (自动 选举 产生 ) 会 与 指定 的 NTP 服 务 器 同步 ， 其 他 CVM 会 通过 内 网 与 Genesis Leader 的 CVM 进 行 时 间 同 步 。 如 图 4-53 
所 示 ， 通 过 在 Nutanix CVM 上 执行 $for i in'svmips'; do echo$i; ssh$i/usr/sbin/ntpq-pn; done 命 令 ， 得 出 以 下 结果 ， 我 们 可 以 看 出 ， 在 这 个 4 节点 的 集群 中 ， 只 有 10.132.68.43 (Genesis 
Leader) 与 外 部 的 NTP 连 接 ， 而 其 他 3 个 节点 均 与 10.132.68.43 同 步 时 间 。 


4.3.4.3 ”NTP 最 佳 实践 
对 于 可 以 直接 连接 互联 网 的 Nutanix 集 群 ， 管 理 员 可 以 将 NTP 设 置 成 互联 网 上 公用 的 时 间 服 务 器 ， 如 cn.pool.ntp.org。 但 是 管理 员 要 确认 网 络 防火 墙 没 有 阻止 访问 NTP 服 务 器 的 地 址 和 端 


- 对 于 不 能 连接 互联 网 的 Nutanix 集 群 ， 需 要 管理 员 指 定 内 部 可 以 连接 的 NIP 服务 器 ， 在 上 默认 情况 下 ，Windows 的 域 控制 器 就 提供 NTP 服 务 器 的 功能 ， 因 此 ， 管 理 员 可 以 将 NTP 服 务 器 指向 到 
域 控制 器 的 IP 地 址 。 考 虑 到 NTIP 时 间 服 务 器 的 宛 余 ， 管 理 员 可 以 添加 多 个 NTP 时 间 服 务 器 来 实现 NTP 服 务 器 之 间 的 宛 余 。 此 外 ， 也 可 以 在 交换 机 上 启动 NIP 服 务 。 


. 不 建议 将 NTP 服 务 器 虚拟 机 安装 在 Nutanix 超 融合 集群 之 上 ， 而 应 该 将 NTP 服务 器 指定 到 集群 之 外 的 NIP 地 址 。 
: NTP 服 务 器 建议 使 用 域名 方式 指定 ， 因 为 IP 地 址 可 能 会 变 。 如 果 用 域名 方式 ， 需 要 保证 DNS 能 够 正常 解析 NTP 服 务 器 的 域名 。 


| 默认 情况 下 ， 如 果 在 创建 集群 时 未 指定 时 区 ， 集 群 将 自动 使 用 UTC 时 区 ， 所 以 建议 在 用 Foundation 创 建 集 群 时 ， 就 手动 设 好 时 间 和 时 区 ， 在 集群 完成 后 需要 执行 ncli cluster set-timezone 
timezone=Asia/Chongqing 命 令 来 将 时 区 修改 为 中 国 时 区 ， 和 否 


则 查看 系统 日 志 或 查看 过 往 信息 时 需要 进行 人 工 的 时 间 换 算 。 


EP 10.132.68.43 - PuTTY 
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图 4-53 NTP 时 间 状 态 查询 


在 IT 系统 里 ， 网 络 安全 性 至 天 重要 。 本 章 的 安全 设计 部 分 主要 涉及 Nutanix 超 融合 系统 中 的 网 络 安全 和 Prism 安 全 访问 控制 。 


通常 我 们 通过 在 防火 墙 上 设置 访问 列表 来 限制 各 个 网 络 之 间 的 流量 。 图 4-54 展 示 了 基于 AHV 的 超 融 合 环境 的 网 络 图 。 


相 比 AHV 环 境 ， 基 于 vSphere 的 虚拟 化 环境 多 了 vCenter Server 的 组 件 (AHV 的 管理 由 Prism 完 成 ) 。 在 用 户 环境 里 ，vCenter Server 和 CVM、ESXi 主 机 并 不 在 同一 个 VLAN， 当 它们 相互 


通信 时 可 能 会 经 过 防火 墙 ， 因 此 ， 网 络 管 理 员 需要 针对 实际 的 环境 来 进行 网 络 防火 墙 的 设置 ， 图 4-55 展 示 了 基于 vSphere 的 Nutanix 集 群 的 网 络 防 火 墙 流量 。 
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图 4-54 基于 AHV 的 超 融合 环境 的 网 络 图 
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图 4-55 ”基于 vSphete 的 超 融 合 环境 网 络 图 


在 管理 员 未 配置 SMTP 服 务 器 的 情况 下 ，Nutanix 集 群 将 自动 通过 Nutanix 提 供 的 云 服务 来 发送 警告 信息 到 Nutanix 广 持 中 心 和 用 户 邮 箱 ， 以 提供 主动 式 的 技术 文 持 服务 ， 但 是 在 很 多 情况 


下 ， 用 户 的 网 络 环境 不 允许 将 服务 器 直接 连接 到 互联 网 ， 因 此 ， 在 这 种 情况 下 ，Nutanix 集 群 中 依赖 互联 网 的 一 些 服务 ， 如 Pulse 服 务 (Nutanix 自 动 化 支持 系统 ) 、 
管理 员 可 以 通过 Prism 手 工 配置 HTTP 代 理 服务 器 允许 集群 连接 到 Nutanix 服 务 中 心 ， 
否则 在 Prism 的 健康 检查 页 面 中 将 出 现 相关 的 报警 信息 。 


知 等 功能 都 将 不 能 正常 工作 ， 
警 到 Nutanix 服 务 中 心 。 
列表 和 端口 清单 。 


44.2 ”访问 控制 
Prism 在 数据 中 心 扮演 着 重要 的 角色 ， 其 集成 了 虚拟 化 、 计 算 、 存 储 等 诸多 功能 


如 图 4-56 所 示 ，Prism 提 供 的 事件 日 志 


软件 版 本 更 新 、 邮 件 报警 通 
也 可 以 设置 连接 到 自 有 的 SMTP 服 务 器 方式 通过 邮件 方式 来 自动 发 送 相关 的 报 
对 于 需要 设置 互联 网 规则 的 网 络 环境 ， 管 理 员 可 以 通过 Nutanix 官 方 提供 的 管理 员 手 册 了 解 更 加 细致 的 网 络 地址 


， 管 理 员 可 以 在 Prism 中 完成 数据 中 心 的 大 量 管理 工作 。 本 节 将 对 Prism 的 安全 性 进行 介绍 。 


志 功 能 会 自动 记录 管理 员 的 登录 、 操 作 ， 对 于 事后 审计 、 故 障 处 理 都 会 起 到 作用 .。 


User 'admin' has logged in from "10.21.250.80" 
User 'admin' has logged in from '10.21.250.80' 
Software '5.0.3' 'nos' download started 

Alert Email configuration updated 

Pulse configuration updated 


User ‘admin’ has logged in from 10.21 250.80' 


= Creation of nfs datastore 'vmContainer1 for container 'vmContainerl' 
[10.21.40.27, 10.21.40. 26, 10.21.40.25] 


Added container 'vmContainer to storage pool 'default-storage-pool-46912' 
User 'admin' has logged in from "127.0.0.1 

LJ User 'hpoc' added 

LJ] User 'admin' has logged in from 1270.01 

m Password reset for user 'admin' 

IN User 'admin' has logged in from "127.0.0.1 


LJ User 'admin' has logged in from 1270.01 


而 事件 日 志 的 基础 则 是 用 户 授权 管理 。 通 过 Prism ， 


Nutanix 支 持 本 地 账户 模式 〈 即 用 户 信息 
Prism。 图 4-58 展 示 了 Prism 与 活动 目录 认证 集成 窗口 。 


通过 设置 活动 目录 相关 信息 ， 活 动 目录 与 Prism 集 成 之 后 ， 管 理 员 还 


存储 在 Nutanix 集 群 的 配置 数据 库 中 ) , 


successful for nodes 


| Include Acknowledged - 14 Events I. 

ENTITIES MODIFIED BY ACKNOWLEDGED TIMESTAMP 

Cluster admin 06/27/17, 9:38:31 AM 
Cluster admin 06/27/17, 9:23:08 AM 
Cluster admin 06/27/17, 9:05:22 AM 
Cluster admin 06/27/17, 9:04:53 AM 
Cluster admin 06/27/17, 9:04:53 AM 
Cluster admin 06/27/17, 9:04:39 AM 
Cluster admin 06/27/17, 8:37:13 AM 
Storage Container, Storage Poo admin 06/27/17. 8:37:12 AM 
Cluster admin 06/27/17. 8:37:08 AM 
Cluster admin 06/27/17. 8:37:07 AM 
Cluster admin 06/27/17. 8:37:03 AM 
Cluster admin 06/27/17, 8:37:02 AM 
Cluster admin 06/27/17, 8:36:59 AM 
Cluster admin 06/27/17, 8:35:50 AM 


图 4-56 Prism 事件 日 志 界 面 


管理 员 可 以 创建 用 户 以 及 分 配 用 户 所 需 的 权限 ， 如 图 4-57 所 示 。 


也 支持 与 活动 目录 集成 的 方式 工作 。 通 过 与 活动 目录 集成 ， 管 理 员 可 以 允许 活动 目录 中 的 用 户 直 接 登 录 


需要 配置 角色 的 映射 关系 ， 即 活动 目录 中 的 用 户 在 Prism 中 对 应 的 权限 ， 在 Prism 中 ， 提 供 了 以 下 三 种 角色 。 


Viewer: 此 角色 只 允许 用 户 查 看 信息 。 不 提供 执行 任何 管理 任务 的 权限 。 
- Cluster Admin: 此 角色 允许 用 户 查 看 信息 和 执行 任何 管理 任务 (但 不 能 创建 或 修改 用 户 账户 ) o 


- User Admin: 此 角色 允许 用 


户 查 看 信息 ， 执 行 任何 管理 任务 和 创建 或 修改 用 户 账户 。 


Configure one or more users that can access the Nutanix software. Users that have been configured are 
displayed below. 


admin Cluster Admin, Yes a 
User Admin, 
Viewer 

hpoc HPOC Admin team-corp- Cluster Admin, Yes FX 


sestinutanix.ca User Admin. 


m Viewer 


图 4-57 Prism) P £3 


在 角色 映射 过 程 中 ， 管 理 员 需 


Directory List 


ae New Directory 


DIRECTORY URL 


DIRECTORY TYPE 


Active Directory 


CONNECTION TYPE 


LDAP 


———— apse 
AUTINEeNnticatloal ypes . Lern 


T L - 


[4-58 ”Prism 与 活动 目录 认证 集成 窗口 


选择 连接 的 活动 目录 、LDAP 类 型 以 及 对 应 的 角色 ， 如 图 4-59 所 示 。 


Cancel Save 


Enter the attributes for this role mapping. 


DIRECTOR’ 

shanghai bd 
LDAP TYPE 

(SROUP V 
HOLE 

Cluster Admin WA 
VALUES 


€ Back Cancel Save 


图 4-59 角色 映射 界面 


Nutanix 支 持 将 活动 目录 中 的 单个 用 户 、 用 户 组 或 者 OU (组 织 单 元 ，Windows 活 动 目录 中 的 概念 ) 作为 对 象 设 置 映 射 的 关系 ， 如 我 们 可 以 把 活动 目录 中 属于 Nutanix admin 用 户 组 的 所 有 
用 户 在 Nutanix 集 群 中 设置 为 Cluster Admin 角 色 。 
45 ”高 可 用 规划 设计 


与 传统 三 层 架 构 不 同 ，Nutanix 采 用 分 布 式 架构 设计 ， 借 助 组 件 的 分 布 式 满足 高 可 可 性 要 求 ， 实 现 系统 架构 和 平台 架构 无 单 点 故障 、 无 性 能 瓶颈 问题 。Nutanix 通 过 多 维度 元 余 的 方式 实现 
系统 的 健壮 性 。 如 图 4-60 所 示 ，Nutanix 提 供 了 从 硬件 (如 硬盘 、 网 卡 、 电 源 等 ) 、 节 点 、 数 据 、 虚 拟 机 以 及 站 点 多 个 层级 的 高 可 用 性 保护 。 


ux ORACLE 


Ef Microsoft VMWare 


T 


= 硬件 PA 数据 虚拟 机 站 点 
* 磁盘 失效 目 乌 合 节点 故障 不 数据 宛 余 及 “。VM 为 中 心 的 保护 ° 多 站 点 复制 
* 关键 组 件 风 余 影响 纠 删 码 e VM 可 用 性 保护 。 同步 / 异步 复制 
* 无 中 断 升 级 -AA 。 与 第 三 方 BC/DR “。 云 连接 
性 检查 方案 集成 * 同城 、 异 地 灾 备 


图 4-60 ”Nutanix 高 可 用 层级 


在 规划 设计 Nutanix 集 群 时 ， 我 们 也 需要 遵循 可 用 性 的 设计 原则 ， 以 确保 系统 的 健壮 性 。 本 节 我 们 将 针对 Nutanix 集 群 的 可 用 性 进行 介绍 。 


对 于 超 融合 集群 而 言 ， 可 用 性 主要 包括 数据 的 可 用 性 以 及 应 用 (虚拟 机 ) 的 可 用 性 ,数据 的 可 用 性 依靠 Nutanix 分 布 式 系统 和 元 余 机 制 来 实现 。 而 虚拟 机 的 可 用 性 主要 依赖 Hypervisor 提 供 
的 可 用 性 功能 来 保证 (如 HA) 。 本 章节 我 们 将 重点 介绍 数据 的 可 用 性 保护 ， 对 于 虚拟 机 的 可 用 性 设计 可 以 参考 Hypervisor 厂 商 提供 的 相关 材料 。 


45.1 数据 可 用 性 设计 


数据 可 用 性 的 作用 是 确保 集群 中 的 各 类 组 件 失效 后 ， 数 据 仍然 完整 可 供用 户 使 用 。 在 传统 存储 架构 中 ， 数 据 的 可 用 性 依赖 RAID 机 制 来 保证 ， 在 一 个 RAID 组 中 可 以 允许 一 块 或 多 块 硬盘 损坏 
而 不 丢失 数据 。 而 在 超 融 合 系统 上 ， 数 据 可 用 性 通过 分 布 式 和 数据 元 余 ( 即 数据 副本 ， 将 多 份 数据 分 布 存 储 在 整个 集群 中 ) 机 制 来 实现 ， 这 种 方式 可 以 提供 更 好 的 可 用 性 和 灵活 性 。 
4.5.1.1 节操 数量 与 数据 可 用 性 的 关系 


Nutanix 在 硬件 方面 通过 硬件 组 件 的 元 余 来 防止 单一 故障 影响 节点 的 正常 运行 ， 如 多 块 SSD 和 HDD， 多 网 口 、 双 电源 元 余 等 ， 任 一 组 件 出 现 故 障 时 ， 节 点 上 运行 的 虚拟 机 、 数 据 仍然 可 用 。 
但 是 在 超 融 合 节点 内 部 ， 仍 然 存 在 着 单 点 故障 ， 如 主板 硬件 损坏 会 导致 该 节点 失效 。 因 此 ， 除 了 要 考虑 硬件 部 件 的 损坏 之 外 ， 我 们 还 需要 考虑 节点 故障 对 于 整个 集群 的 影响 。 


不 同 规模 的 用 户 使 用 的 节点 数量 各 不 相同 ， 但 Nutanix 超 融合 系统 要 求 节点 的 数量 一 定 大 于 等 于 3， 并 可 以 扩展 至 没有 理论 上 限 的 节点 数量 ;以 保证 集群 内 数据 的 可 用 性 。 在 设计 集群 节点 
的 数量 时 ， 除 了 需要 考虑 通过 多 节点 满足 计算 能 力 的 要 求 之 外 ， 节 点 的 数量 与 数据 元 余 因 子 RF 值 、 可 容忍 损坏 的 组 件数 量 有 关 。 


表 4-15 显 示 了 为 不 同 见 余 因 子 设 定 时 ， 可 以 保障 数据 可 用 性 的 最 少 节点 数 和 最 少 机 箱 数 组 合 。 


R415 ”数据 可 靠 性 级 别 


ZUR Al fF Ex bs E BI 最 少 机 箱 数 数据 可 靠 性 


Lak I am 
2 个 节点 或 2 FRB 


如 表 4-15 所 示 ， 在 RF 为 2 时 ， 最 少 需 要 3 个 节点 ， 最 大 可 以 接受 1 个 硬盘 或 1 个 节操 同时 故障 ( 含 节 点 内 多 块 硬盘 同时 故障 ) ， 在 RF 为 3 时 ， 最 少 的 节操 数 为 5， 最 大 允许 同时 坏 两 个 硬盘 (不 
同 主机 上 的 ) 或 两 个 节点 同时 故障 。 因 此 ， 我 们 可 以 看 出 RF 值 的 不 同 设置 ， 不 仅 对 数据 的 见 余 度 有 关系 ,也 和 可 容忍 故障 的 组 件 和 节点 数量 有 关系 。 
4.5.1.2 故障 域 设 计 


故障 域 也 称 可 用 域 ， 是 分 布 式 系统 中 为 保证 数据 和 组 件 可 用 性 的 天 键 元 素 。 在 Nutanix 产 品 中 提供 了 针对 节点 和 机 箱 的 可 用 域 设 计 ， 集 群 会 按照 当前 环境 的 情况 自动 决定 使 用 哪 种 类 型 的 故 
障 域 保 证 数据 的 可 靠 性 。 


在 Nutanix 集 群 里 ， 虚 拟 机 运行 时 有 本 地 化 的 特性 ( 即 在 虚拟 机 运行 的 节点 上 和 存 着 一 份 完整 数据 ) ， 而 其 他 的 1 份 或 2 份 数据 通过 打 散 的 方式 分 布 在 整个 集群 中 的 其 他 节点 上 。 


我 们 通过 例子 来 说 明 ， 数 据 的 分 布 情况 。 我 们 以 只 有 一 个 机 箱 ，RF 值 为 2 的 4 个 节点 的 集群 为 例 ， 庶 拟 机 目前 运行 在 节点 A 上 ， 那 么 在 节点 A 上 有 一 份 完整 的 数据 ， 在 节点 B、C、D 上 共同 存 
有 一 份 虚拟 机 的 见 余数 据 ， 如 图 4-61 所 示 。 


图 4-61 Nutanix 数据 存放 示意 图 


图 4-61 Nutanix 数 据 存 放 示 意图 


ik: 国 @ 全 代 指 虚拟 机 数据 
在 图 4-61 中 ， 当 一 个 物理 节点 因为 任何 原因 故障 后 ， 虚 拟 机 的 数据 在 整个 集群 中 仍然 是 完整 并 受 RF 机 制 保护 的 。 
因此 ， 对 于 图 4-61 中 的 集群 而 言 ， 我 们 可 以 认为 最 小 的 可 用 域 是 节点 。 节 点 的 损坏 不 影响 集群 的 运行 。 


在 大 规模 的 数据 中 心 内 ， 超 融合 集群 的 规模 增加 ， 以 图 4-62 为 例 ， 这 是 一 个 使 用 了 3 个 机 箱 (每 个 机 箱 只 有 两 个 节点 ) ， 共 6 个 节点 的 Nutanix 集 群 。 


图 4-62 ”包含 多 个 机 箱 的 Nutanix 集 群 


注 : 国 @ 信 代 指 虚拟 机 数据 


以 图 4-62 为 例 ， 以 节点 为 最 小 可 用 域 来 设计 集群 时 ， 虚 拟 机 A 运行 在 机 箱 A 的 节点 A 上 ， 因 为 数据 本 地 化 特性 ， 虚 拟 机 的 数据 会 在 节点 A 上 存储 一 份 ， 在 剩余 的 5 个 节点 上 共同 存储 一 份 虚拟 
机 数据 (由 AOS 决 定 ， 不 能 人 工 干 预 数据 放置 位 置 ) 。 在 RF 值 为 2 时 ， 集 群 中 同时 只 人 允许 一 个 节点 出 现 故障 ， 以 图 4-62 为 例 ， 当 机 箱 A 因 为 故障 不 能 工作 时 就 已 经 超出 了 最 大 可 容忍 的 故障 节点 
数量 ， 集 群 将 不 能 继续 工作 。 


上 述 的 故障 对 于 企业 数据 中 心 而 言 是 难以 接受 的 ， 因 此 ， 这 也 引出 了 以 机 箱 为 单位 的 可 用 域 设 计 。 


4.5.1.3 机箱 感知 设计 


机 箱 感知 (也 称 机 架 感 知 ) 是 Nutanix 分 布 式 文件 系统 按照 机 箱 为 单元 来 决定 数据 放置 和 分 布 的 一 种 技术 。 通 过 机 箱 感知 技术 ， 可 以 让 集群 容忍 机 箱 级 别 的 故障 。 


当 集群 中 满足 启动 机 箱 感 知 的 条 件 后 ， 虚 拟 机 的 数据 将 按照 图 4-63 的 方式 分 布 。 在 一 个 机 箱 失 效 的 情况 下 ， 集 群 服务 可 以 继续 工作 、 数 据 和 应 用 都 处 于 可 用 状态 。 


NODE A 


NODE A 


BLOCK 
NODE B NODE A 


图 4-63 ”开启 机 箱 感 知 后 的 数据 放置 
注 : 国 @ 信 代 指 虚拟 机 数据 


与 RF 值 可 以 容忍 的 最 大 故障 节点 数 和 硬盘 数 类 似 ， 机 箱 感 知 特性 对 于 机 箱 数 以 及 机 箱 内 的 节点 数 也 有 要 求 。 在 RF 为 2 的 环境 里 ， 最 小 需要 3 个 机 箱 ， 每 个 机 箱 中 最 少 需 要 1 个 节点 ， 人 允许 损坏 
一 个 机 箱 。 在 RF 为 3 的 环境 里 ， 最 小 需要 5 个 机 箱 ， 每 个 机 箱 至 少 包 括 1 个 节点 ， 最 大 允许 同时 损坏 两 个 机 箱 ， 如 表 4-16 所 示 。 


表 4-16 ”最低 集群 要 求 
元 余 因子 需要 的 最 少 机 箱 数 和 每 个 机 箱 的 最 少 节点 数 数据 可 靠 性 
3 个 机 箱 (无 上 限 ) 1 个 机 箱 或 1 个 节点 或 1 个 
元 余 因子 2 E 
RAF 每 个 机 箱 有 1 个 节点 i MiB 


5 个 机 箱 (无 上 限 ) 2 个 机 箱 或 2 个 市 点 或 2 个 


见 余 因子 3 . M 
每 个 机 箱 有 1 个 节点 磁盘 


在 设计 机 箱 感知 时 ， 除 了 要 满足 表 4-16 的 集群 最 小 规模 的 要 求 之 外 ， 还 有 一 些 设计 原则 需要 遵循 ， 如 表 4-17 所 示 。 
表 4-17 机箱 和 节点 摆 放 要 求 
宛 余 因子 要 X 例子 
要 维持 机 箱 容错 性 ， 必 须 至 少 有 3 个 | 如 果 机 箱包 含 4 个 节点 ， 则 需要 有 8 个 节点 分 布 


aggya | 机 箱 。 当 集群 袍 余 因子 (RF) 为 2 时 ,| 于 剩余 的 ( 非 故障 ) 机 箱 中 ， 以 便 维持 该 集群 的 机 
若 要 计算 维持 机 箱 容错 性 所 需 的 节点 数 , | 箱 容错 性 。X= 机 箱 中 的 最 大 节点 数 。 在 此 案例 中 ， 
需要 将 机 箱 内 的 最 多 或 最 大 节点 数 乘 以 2 | 机 箱 中 有 4 个 节点 。2X= 剩余 机 箱 中 有 8 个 节点 

要 维持 机 箱 容错 性 ， 必 须 至 少 有 5 个 | ”如 果 机 箱包 含 4 个 节点 ， 则 需要 有 16 个 节点 分 布 

元 全 因子 为 3 | 机箱 。 当 集群 元 余 因子 为 3 时 ， 若 要 计 | 于 剩余 的 ( 非 故障 ) 机 箱 中 ， 以 便 维持 该 集群 的 机 

算 维 持 机 箱 容错 性 所 需 的 节点 数 ， 需 要 | 箱 容错 性 。X= 机 箱 中 的 最 大 节点 数 。 在 此 案例 中 ， 


将 机 箱 内 的 最 多 或 最 大 节点 数 乘 以 4 “| 机 箱 中 有 4 个 节点 。4X= 剩余 机 箱 中 有 16 个 市 点 


均匀 的 节点 分 布 有 助 于 提高 硬盘 的 利用 率 以 及 系统 的 高 可 用 性 。 当 节点 不 均匀 押 放 时 ， 机 箱 感 知 会 采用 “尽力 而 为 ”特性 将 匈 余 数据 保存 在 同一 个 机 箱 上 (在 这 种 情况 下 ， 将 不 能 接受 整个 
机 箱 损坏 ， 仪 能 接受 节操 或 磁盘 损坏 ) 。 


管理 员 可 以 通过 Prism 界 面 来 了 解 当前 集群 的 数据 弹性 状态 。 当 集群 不 能 满足 机 箱 感 知 要 求 时 ， 数 据 可 靠 性 将 使 用 节点 作为 故障 域 ，Block 的 故障 域 类 型 区 域 将 显示 机 箱 数 不 满足 要 求 ， 如 图 
4-64 所 泵 。 


Static | 
Configuration 


Erasure Code 1 
Strip Size 


Stargate Health | 


Zookeeper | 
Metadata | 
Extent Groups | 
Oplag | 
Free Space | 


FAULT DOMAIN TYPE: BLOCK 


Static Ü Mot enough rackable units (blocks) 
Configuration in the cluster 


图 4-64 ”数据 可 靠 性 状态 


当 集 群 中 的 机 箱 和 节点 数量 满足 机 架 感 知 的 要 求 之 后 ， 系 统 将 自动 将 故障 域 类 型 设置 为 Block， 如 图 4-65 所 示 。 


FAULT DOMAIN TYPE: BLOCK 


Static | 
Configuration 


Stargate Health 1 
AOOKEE DET | 
Extent Groups | 
Oplog | 
Metadata | 
Erasure Code | 
Strip Size 

Free Space 1 


图 4-65 ”故障 域 类 型 
满足 特定 条 件 后 ，Nutanix 集 群 就 会 实现 机 箱 容错 。 出 现 以 下 情况 时 ， 则 自动 应 用 机 箱 感知 : 
- 集群 的 每 个 存储 层 在 各 个 机 箱 上 至 少 包 含 一 个 驱动 器 。 
- 集群 中 的 每 个 存储 容器 都 至 少 有 两 个 宛 余 因子 。 
.如果 宛 余 因 子 为 2， 则 集群 中 至 少 有 三 个 机 箱 。 


集群 中 需要 有 充足 的 空闲 空间 ， 且 具有 空闲 空间 的 机 箱 数量 至 少 等 于 宛 余 因 子 的 数量 。 例 如 ， 当 集群 中 存储 容器 的 宛 余 因 子 为 2 时 ， 则 集群 中 至 少 需要 两 个 机 箱 有 充足 的 空闲 空间 来 存储 
数据 ， 如 果 空 间 不 足 ，RF 不 能 被 保证 ， 且 有 新 数据 写 入 时 因为 空间 被 写 满 ， 会 导致 数据 写 入 失败 ) o 


所 有 存储 容器 均 未 启用 纠 删 码 。 


45.1.4 超 融 合 设备 放置 建议 


机 箱 感知 解决 了 数据 上 自动 放置 的 问题 ， 规 避 了 机 箱 故 障 市 来 的 风险 ， 不 过 在 数据 中 心 的 机 架设 计 方 面 ， 也 需要 结合 机 染 感 知 特性 在 物理 位 置 上 来 摆 放 超 融 合 的 机 箱 。 如 图 4-66 所 示 ， 我们 使 
用 了 3 台 2U 的 机 箱 ， 每 个 机 箱 内 插入 了 4 个 节点 ， 这 12 个 节点 组 成 一 个 Nutanix 集 群 。 在 机 架设 计时 ， 我 们 可 以 将 这 3 个 机 箱 全 部 放 在 同一 个 机 架 内 。 


但 是 将 节点 放置 在 同一 个 机 架 内 ， 如 果 电 源 出 现 故 障 或 者 TOR 交 换 机 出 现 故 障 ， 那 么 所 有 节点 都 将 无 法 对 外 提供 服务 。 因 此 ， 通 过 将 节点 放置 在 不 同 的 机 架 内 ， 可 以 防止 因为 机 架 供 电 或 网 
络 链 路 问题 引起 的 机 箱 故 障 。 图 4-67 中 展示 了 将 超 融 合 机 箱 放置 在 不 同 的 机 架 内 的 视图 。 
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图 4-67 分布 摆 放 机 箱 


通过 图 4-67 的 方式 分 布 放置 超 融合 机 箱 ， 结 合 Nutanix 软 件 中 集成 的 机 箱 感 知 技术 ， 加 上 数据 中 心 原 有 的 电源 、 网 络 元 余 等 手段 ， 可 以 有 效 地 提高 超 融合 集群 的 可 用 性 ， 在 设计 过 程 中 可 以 
参考 如 下 的 可 用 性 设计 最 佳 实践 : 


- 在 每 个 机 箱 内 的 节点 数 相 等 的 情况 下 ， 且 机 箱 数 满足 RF 值 最 低 的 要 求 时 ， 均 可 以 满足 机 箱 感知 的 要 求 。 
节点 数 为 非 质数 ， 且 可 以 被 4 (2U 空 间 可 以 插入 4 个 节点 ) 整除 时 ， 空 间 利 用 率 最 高 。 
. 遵守 机 箱 感知 最 小 限制 和 机 箱 节 点 摆 放 要 求 。 


` 分 多 个 机 架 摆 放 机 箱 ， 可 以 防止 机 架 故 障 对 集群 的 影响 


45.2 ”数据 中 心 容 灾 
越 来 越 多 的 企业 建设 或 者 租用 了 多 个 数据 中 心 来 满足 日 益 增长 的 业务 需求 。 大 部 分 的 企业 在 多 数据 中 心 建设 时 主要 使 用 以 下 几 种 思路 。 
- 主 数 据 中心 / 灾 备 数 据 中 心 


主 数据 中 心 / 灾 备 数据 中 心 也 称 主 备 模 式 数 据 中 心 ， 用 户 所 有 的 业务 系统 在 主 数据 中 心中 运行 ， 而 灾 备 数据 中 心 为 业务 系统 提供 冷 备 和 热 备 功能 ， 当 主 数据 中 心 出 现 应 用 故障 时 ， 可 以 将 单 


个 应 用 或 数据 中 心 整体 切换 至 在 备 数 据 中 心 运行 。 
双 活 数 据 中 心 
将 所 有 业务 系统 同时 在 两 个 数据 中 心中 运行 ， 为 用 户 提供 服务 ， 当 某 个 数据 中 心 的 应 用 系统 出 现 故 障 时 ， 另 一 个 数据 中 心 可 持续 提供 服务 保障 。 
上 述 两 种 类 型 的 数据 中 心 模式 在 服务 能 力 上 各 不 相同 ， 如 表 4-18 所 示 。 


R418 数据 中 心服 务 能 力 


数据 中 心 模式 对 外 能 力 资源 利用 率 灵活 度 
ie —— n — |— lw ll 
双 活 o oo% | 506 | e 灵活 


对 于 业务 高 度 依赖 |T 的 用 户 ， 通 常会 通过 多 数据 中 心 的 能 力 来 实现 容 灾 以 满足 SLA 要 求 ， 防 止 数据 中 心 故 障 (如 地 震 灾害 、 电 力 故障 ) 对 业务 造成 影响 。 图 4-68 展 示 了 通过 Nutanix 解 决 方 
案 实 现 两 地 三 中 心 的 示例 。 


45.2.1 数据 中 心 容 灾 设计 考量 
企业 在 进行 数据 中 心 的 容 灾 建 设 时 ， 需 要 考虑 使 用 的 容 灾 技 术 、 数 据 中 心 运营 方式 是 否 可 以 满足 业务 上 的 要 求 。 因 此 ， 在 多 数据 中 心 容 灾 建 设 时 ， 可 以 从 以 下 几 个 方面 来 思考 。 
集群 规模 和 需要 灾 备 保护 的 虚拟 机 数量 


集群 的 规模 决定 了 可 以 承载 的 应 用 的 容量 ， 举 例 来 说 ， 如 果 在 生产 数据 中 心 有 100 个 虚拟 机 需要 进行 保护 ， 那 么 在 灾 备 数据 中 心 是 否 也 需要 提供 运行 100 个 虚拟 机 的 完整 能 力 。 否 则 在 主 中 
心 发 生 事故 时 ， 可 能 会 发 生 备用 数据 中 心 资源 不 足 不 能 支撑 这 些 应 用 的 问题 。 


- 虚拟 化 的 整合 比 


一 般 来 说 ， 在 生产 中 心 部 署 虚拟 机 时 ， 我 们 一 般 会 选择 相对 比较 宽松 的 整合 比 ， 如 物理 CPU 到 vCPU 划 算 比 为 1 : 2 到 1 : 4， 内 存 换算 比 为 1 : 1， 存 储 则 采用 全 闪 模 式 (全 部 使 用 SSD) 而 在 
灾 备 中 心 考 虑 到 灾 备 中 心 的 使 用 机 会 比较 少 ， 物 理 资 源 到 虚拟 资源 的 换算 比 采 用 1 : 4 甚至 是 1 : 6， 内 存 资 源 超额 分 配 至 1 : 2， 存 储 使 用 混合 模式 (使 用 SSD+HDD，SSD 容 量 与 HDD 容 量 的 比例 
为 1 : 4) 。 在 建设 灾 备 中 心 方案 时 对 于 整合 比 需要 进行 考量 ， 这 直接 关系 到 投入 的 超 融合 节点 的 数量 与 配置 。 


: 数据 中 心 数量 与 距离 


数据 中 心 的 数量 决定 了 是 否 具备 容 灾 技术 条 件 ， 如 使 用 同步 和 异步 方案 要 求 使 用 两 个 Nutanix 集 群 ， 多 个 数据 中 心 之 间 的 距离 决定 了 使 用 同步 还 是 异步 方案 。 因 为 使 用 同步 技术 需要 将 网 络 
延迟 控制 在 ?ms 以 内 ， 物 理 定 律 决定 了 两 个 数据 中 心 的 距离 要 在 百 公 里 以 内 (具体 公里 数 取决 于 光纤 传输 质量 ， 光 纤 传输 质量 会 产生 额外 的 延迟 ) 。 


对 于 只 有 一 个 数据 中 心 但 仍然 有 灾 备 需要 的 用 户 ， 可 以 考虑 通过 互联 网 方式 将 数据 备份 到 AWSs/Azure 公 有 云 之 上 ， 实 现 备份 的 需求 。 
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A468 ”两 地 三 中 心 建设 示意 图 


- RPO/RTO 要 求 


不 同 的 应 用 场景 对 RPO/RTO 的 要 求 不 同 ， 核 心 关键 应 用 往往 不 希望 受到 停机 和 数据 丢失 的 影响 ， 因 此 ， 对 于 这 些 应 用 可 以 采用 Metro 和 集群 方式 来 保护 ， 而 对 于 可 以 接受 停机 或 一 定时 间 内 
的 数据 丢失 的 应 用 可 以 采用 异步 复制 来 实现 容 灾 技术 。 


网 络 要 求 


同步 对 于 网 络 市 完 和 延 时 都 有 比较 高 的 要 求 ， 因 此 ，Metro 集 群 仅 适 合 两 个 数据 中 心 相 邻 的 环境 (一般 在 百 公 里 以 内 ) ， 而 异步 容 灾 集群 则 没有 这 些 网 络 条 件 上 的 要 求 。 在 使 用 Metro 集 群 
时 ， 因 为 两 个 站 点 间 的 ESXi 主 机 要 加 入 到 同一 个 vCenter 和 集群 ， 而 且 考 虑 到 虚拟 机 在 备 端 HA 重启 后 不 需要 进行 网 络 设置 的 修改 ， 因 此 ， 使 用 Metro 技 术 的 集群 一 般 需要 通过 VXLAN 等 技术 来 组 
建 大 两 层 的 网 络 。 


此 外 ， 网 络 融 宽 也 会 影响 到 数据 复制 的 速度 ， 进 而 影响 到 RTO/RPO。 在 使 用 容 严 方案 时 ， 数 据 之 间 除 了 网 络 延 迟 的 要 求 忆 外， 还 需要 进一步 考虑 网 络 市 碗 ， 具 体 市 宽 的 值 取决 于 需要 保护 
的 虚拟 机 产生 的 数据 变化 值 。 举 例 来 说， 如 果 保 护 的 虚拟 机 内 运行 的 是 数据 库 ， 数 据 库 的 更 新 量 决定 了 市 宽 量 。 


系统 产生 的 数据 变化 量 、 数 据 压缩 比 、 目 标 RPO 会 直接 影响 到 数据 中 心间 的 带宽 要 求 ， 假 设 用 户 可 以 接受 一 个 小 时 的 RPO， 一 个 小 时 的 数据 量 为 15GB， 压 缩 比 为 30%， 我 们 可 以 使 用 以 下 
的 公式 来 计算 : 


所 需 带 宽 = 数 据 变化 量 X (1- 压 缩 比 %) /RPO-15GB X (1-30%) /3600=10.5GB/3600=2.92MB/s=23.33Mb/s 


综合 考量 上 述 因素 之 后 ， 就 可 以 开始 着 手 进行 容 灾 系统 的 架构 设计 ， 图 4-69 是 一 个 典型 的 两 地 三 中 心 的 容 灾 系统 染 构 图 。 
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如 图 4-69 所 示 ， 数 据 中 心 管理 员 决 定 在 3 个 数据 中 心 之 间 使 用 不 同 的 数据 保护 策略 ， 如 站 点 1 和 站 点 2 通过 10GbE 的 网 络 进行 双向 的 同步 复制 ， 同 时 站 点 1 和 站 点 2 通过 见证 节点 (可 以 运行 在 
公有 云 或 第 三 方 数据 中 心 ) 来 判断 网 络 故 障 的 根源 ， 当 站 点 1 或 站 点 2 之 间 因 为 网 络 进 行 隔离 时 ， 通 过 见证 节点 来 判断 站 点 的 健康 情况 。 站 点 3 通过 1GbE 网 络 与 站 点 1 和 站 点 2 进行 双向 的 数据 异 
步 复制 ， 以 实现 不 同 级 别 的 数据 保护 。 


45.2.2 数据 中 心 容 灾 设计 实战 
本 节 将 以 一 个 用 户 的 数据 中 心 灾 备 需 求 为 基础 来 实践 容 灾 数据 中 心 建设 的 规划 设计 。 
某 企业 已 经 开始 使 用 VMware vSphere 作 为 服务 器 虚拟 化 系统 ， 并 已 经 将 ERP、CRM 和 办 公 系 统 以 及 开发 测试 等 系统 迁移 到 虚拟 化 平台 。 具 体 情况 如 表 4-19 所 示 。 


表 4-19 ”当前 虚拟 机 表格 


作用 总 vCPU 数量 总 容量 
ERP 10TB 
CRM 10TB 
开发 测试 20TB 
办 公 系统 | 10 | 80 | 120GB | 10TB 


当 业 务 运行 了 一 段 时 间 之 后 ，IT 部 门 发 现 现 有 的 存储 性 能 和 容量 已 经 不 能 满足 业务 发 展 的 要 求 (之 前 的 存储 系统 配置 SSD 作 为 缓存 层 ，SAS 盘 作为 数据 层 ) 。IT 部 门 在 2017 年 的 IT 项 目 计划 
中 决定 采用 超 融 合 方案 在 不 替换 虚拟 化 系统 VMware vSphere 的 情况 下 ， 薪 换 以 往 数据 中 心 的 三 层 架 构 来 满足 存储 的 性 能 和 扩容 需 要 ， 并 希望 通过 超 融 合 技术 来 实现 两 地 数据 中 心间 的 容 灾 来 提 
升 系统 的 可 用 性 ， 生 产 数据 中 心 选择 在 北京 ， 灾 备 数据 中 心 决定 放置 在 上 海 。 在 北京 和 上 海 数据 中 心 之 间 使 用 的 1GB 专 线 网 络 来 连接 两 个 数据 中 心 ， 实 测 可 用 的 带宽 为 600Mbp/s 左 右 ， 往 返 的 
网 络 延 迟 为 30ms 左 右 。 


针对 上 述 的 需求 ， 基 本 可 以 确定 : 
主 数 据 中 心 的 应 用 需求 需要 建议 使 用 全 闪 模 式 的 超 融合 设备 。 
灾 备 中 心 的 应 用 需求 可 以 使 用 混合 模 工 的 超 融合 设备 。 
. 生产 和 灾 备 中 心 之 间 的 网 络 条 件 不 满足 同步 复制 的 要 求 ， 只 能 使 用 异步 方案 。 
. 生产 中 心 需 要 提供 800 颗 vCPU，840GB 内 存 ，50TB 存 储 容量 的 计算 和 存储 能 力 。 


有 了 生产 中 心 的 配置 要 求 之 后 ， 接 下 来 需要 计算 灾 备 数据 中 心 的 配置 。 在 进行 灾 备 中 心 的 配置 估算 之 前 ， 需 要 确认 在 生产 中 心 的 所 有 的 虚拟 机 是 否 都 需要 灾 备 中 心 保护 ,或 者 仅 对 部 分 的 虚 
拟 机 进行 保护 。 因 为 两 种 方案 在 硬件 配置 上 会 有 比较 大 的 差别 。 


方案 一 ”完全 保护 

完全 保护 方案 将 在 生产 中 心 运行 的 所 有 的 虚拟 机 都 在 灾 备 中 心 留存 一 份 ， 灾 备 中 心 可 以 使 用 AHV 作 为 虚拟 化 系统 。 两 个 数据 中 心 的 超 融合 设备 做 对 称 设 计 ， 如 图 4-70 所 示 。 
方案 二 ”部 分 保护 

在 采用 部 分 保护 方案 时 ， 我 们 首先 需要 给 应 用 程序 进行 优先 级 分 类 ， 对 于 企业 来 说 ， 通 常会 把 ERP 和 CRM 设 为 第 一 优先 级 ， 而 办 公 系 统 为 第 二 优先 级 ， 开 发 测试 为 第 三 优先 级 。 
与 客户 确定 了 应 用 的 优先 级 分 类 之 后 ， 我 们 可 以 得 出 : 

- 优先 级 1 的 总 资源 要 求 为 : 320 颗 vCPU，640BG 内 存 ，20TB 存 储 容量 

. 优先 级 2 的 总 资源 要 求 为 : 80 颗 vCPU，120GB 内 存 ，10TB 存 储 容量 

. 优先 级 3 的 总 资源 要 求 为 : 40 晒 vCPU，80GB 内 存 ，20TB 存 储 容 量 
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图 4-70 “完全 保护 示意 图 


根据 上 述 的 优先 级 组 合 ， 可 以 得 出 不 同 的 硬件 配置 。 采 用 部 分 保护 方案 时 的 架构 如 图 4-71 所 示 。 


数据 中 心间 
z& ( 1GB) 


PS uh Ras 


主 中 心 核心 交换 机 灾 备 中 心 核心 交换机 


> 8 根 10GbE 445 
1218 10GbE 648 ior de toc! DE Gin (每 节点 一 根 ) 
(每 节点 一 根 ) dh 每 节操 一 4 根 1GbE IPMI 
6 根 1GbE IPMI 6 根 1GbE IPMI 4 $R 1GbE IPMI 


12 FA 
VMware ESXi 


图 4-71 ”部 分 保护 方案 示意 图 


第 5 章 HCI 部 署 与 测试 


超 融合 系统 相 较 于 传统 三 层 以 构 的 服务 器 和 存储 系统 的 集成 方案 ， 在 安装 部 署 及 业务 上 续 效 率 方面 有 着 明显 的 优势 。 


一 般 情 况 下 ， 超 融合 系统 产品 都 会 提供 出 三 预 装 系统 的 方式 ， 产 品 到 货 之 后 用 户 只 需 简 单 设置 ， 融 可 以 开始 部 署 应 用 系统 ， 使 得 原本 需要 数 周 完成 的 基础 设施 安 委 部 署 的 工作 缩短 为 数 小 
时 ， 加 速 了 系统 上 线 的 时 间 。 


此 外 ， 为 了 更 为 方便 、 灵 活 地 调整 超 融 合 系统 的 部 署 环境 ， 超 融合 厂商 也 会 提供 集成 化 的 部 署 工具 ， 满 足 用 户 自行 选择 Hypervisor 软 件 和 版 本 的 需求 。 
作为 超 融 合 系统 领域 的 领导 厂商 ，Nutanix 为 用 户 提 供 了 简便 易 用 的 部 署 工 具 ， 以 适用 于 各 种 Hypervisor 部 署 场景 ， 本 章 将 针对 Nutanix 系 统 的 部 署 进行 详细 讲述 。 


本 章 所 提 及 的 安装 主要 是 指 Nutanix AOS 软 件 系统 的 安装 及 Nutanix 集 群 的 部 署 ， 默 认 所 有 的 安装 部 署 均 基 于 Nutanix NX 系列 展开 。 


5.1 集群 部 署 


Nutanix 超 融合 系统 支持 目前 市 场 上 主流 的 Hypervisor， 包 括 Nutanix AHV, Citrix Xen-Server, Microsoft Hyper-V 和 VMware vSphere， 可 以 满足 不 同业 务 场景 的 需求 。 针 对 
Hypervisor 的 选 型 (可 参见 第 4 章 ) ， 根 据 需要 来 选择 合适 的 虚拟 化 Hypervisor。 在 完成 安装 环境 的 准备 工作 之 后 ， 你 可 以 直接 跳 转 到 对 应 的 虚拟 化 Hypervisor 部 署 的 章节 了 解 具 体 的 安装 部 署 


如 前 文 所 述 ， 超 融合 厂商 通常 会 提供 出 厂 预 装 系统 ，Nutanix 在 向 用 户 交 付 设 备 前 也 会 预 装 Nutanix AHV、Nutanix CVM 以 及 基于 CVM 的 Foundation。 在 Nutanix 设 备 到 货 之 后 ， 只 需要 
进行 简单 的 环境 设置 ， 就 可 以 开始 使 用 基于 CVM 的 Foundation 来 创建 集群 。 


如 果 设 备 未 进行 出 厂 预 装 ， 或 者 需要 重新 安装 ， 可 以 使 用 Nutanix 一 键 式 部 署 工 具 Foundation Standalone 重 新 安装 Nutanix AOS 及 选 定 的 Hypervisor。 


除了 上 述 两 种 情况 之 外 ， 在 实际 的 运行 环境 中 ， 我 们 还 可 能 遇 到 因 硬 件 或 软件 故障 需要 更 换 新 设备 的 情况 ，Nutanix 提 供 了 一 个 名 为 Phoenix 的 工具 ， 实 现在 裸 设备 上 安装 Nutanix AOS, 
Hypervisor 或 修复 Nutanix CVM, 


El 
e. 如 果 你 的 环境 中 已 经 部 署 了 Nutanix 集 群 ， 可 以 直接 使 用 Prism 控 制 台 中 提供 的 一 键 扩展 集群 功能 ， 将 新 购 入 的 节点 添加 到 现 有 的 集群 中 。 


5.1.1 -环境 准备 


在 开始 Nutanix 集 群 部 署 之 前 ， 你 需要 完成 如 下 的 环境 准备 工作 : 


- 完成 设备 物理 安装 ， 连 通电 源 及 网 络 。 

` 检查 设备 系统 兼容 性 信息 ， 选 择 官方 推荐 的 软件 版 本 。 
. 下 载 系 统 安装 文件 、Hypervisor ISO 镜像 以 及 配置 工具 。 
完成 Nutanix 集 群 所 需 的 网 络 卫 地 址 规划 。 


参照 3.1 节 内 容 ， 完 成 Nutanix 支 持 中 心 账户 注册 ， 在 浏览 器 中 打开 并 登录 Nutanix 支 持 门 户 网 站 http://my.nutanix.com， 如 图 5-1 所 示 。 
Welcome back 
! , , 


These are the Mutanix services that are currently active for your account. You can activate a 
new service by clicking on it and following the steps on your screen. 


Next 
& 


Engage with Nutanix community via Blogs, Activities & Forums 


e Community Edition 
Forum for all things NOS Community Edition 


Support Portal 


Open/View Cases, KB, SW downloads, Docs, Installed Base & Licenses 


e Deal Registration Portal 
Submit Deal Registrations 


Partner Portal 
e Training, marketing assets, campaigns, analyst reports, competitive 
knowledge and more. 


Nutanix Education Portal 
Take NuSchool Technical Training and Get Certified 


图 5-1 Nutanix 单 点 登录 账户 首页 


你 会 发 现 图 5-1 中 Support Portal 是 未 激活 的 状态 ， 点 击 “Support Portal”， 页 面 会 跳 转 到 Nutanix 支 持 门 户 激活 页 面 ， 你 需要 输入 Nutanix 设 备 序列 号 (SNB) 或 服务 支持 单 号 ， 点 
击 “Activate” 以 激活 账户 ， 如 图 5-2 所 示 。 


Settings X Logout E 


NLU DATNI X. 


€ Back to Main 


Activation Required 


You are trying to access portal.nutanix.com but in order to do so you first must 
activate your account. To do so please fill out the information required below. 


图 5-2 ”Nutanix 支 持 门户 账户 激活 窗口 
SI 如 图 5-3 所 示 。 


完成 Nutanix 支 持 门户 账户 激活 之 后 ， 你 可 以 访问 Nutanix 的 官方 支持 网 站 ， 查 阅 官 方 文档 、 知 识 库 ， 下 载 安装 镜像 以 及 查询 账户 名 下 的 Nutanix 产 品 信 息 


EN Documentation ~ Support & Forums v Downloads v My Products v 


SUPPORT PORTAL 


小 


DOWNLOADS 


目 


VIEW CASES 


DOCUMENTATION 


图 5-3 ”Nutanix 官 方 支持 网 站 主页 


5.1.1.1. 设备 物理 安装 
Nutanix 超 融合 作为 软 硬 一 体 化 的 解决 方案 ， 根 据 购买 的 硬件 型 号 与 数量 不 同 ， 用 户 会 得 到 一 个 或 多 个 机 架 服务 器 ，Nutanix 超 融合 设备 在 外 观 上 与 常见 的 机 架 服务 器 并 无 太 大 差别 ， 硬 件 
可 以 是 本 书 第 2 章 中 介绍 的 Nutanix NX 系列 硬件 、 联 想 HX 系 列 硬件 或 者 Dell XC 系 列 硬件 。 在 设备 的 物理 安装 方面 ， 与 传统 的 机 架 式 服务 器 上 架 安装 的 流程 类 似 ， 本 书 中 所 讲述 的 安装 内 容 是 
于 Nutanix NX 系列 展开 的 ， 关 于 联想 HX 系列 或 者 Dell XC 系 列 设备 的 物理 安装 ， 请 参考 对 应 厂商 官方 网 站 获得 支持 ， 
Nutanix NX 系 统 提供 了 1U 高 度 和 2U 高 度 的 标准 机 架 式 设备 ， 不 同 的 节点 类 型 在 物理 安装 上 有 所 不 同 ， 受 限于 本 书 的 篇 幅 ， 本 节 不 再 就 细节 内 容 进行 展开 


你 可 以 通过 Nutanix 官 方 支持 门户 网 站 ， 在 主 菜单 中 选择 Documentation 一 Software Documents， 按 照 图 5-4 所 示 的 筛选 关键 字 ， 查 询 到 Nutanix 硬 件 管理 指南 ， 人 参照 官方 指南 完成 设备 
的 物理 安装 。 
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图 5-4 ”Nutanix 硬 件 管理 指南 页 面 


5.1.1.2 设备 兼容 性 检查 


Nutanix Foundation 支 持 在 几乎 所 有 的 Nutanix 硬 件 型 号 上 安装 Nutanix AHV, vSphere ESXi、Hyper-V 及 XenServer 虚 拟 化 Hypervisor。 但 因 某 些 硬 件 型 号 是 针对 特定 应 用 场景 设计 
的 ， 故 可 能 存在 某 些 安装 限制 。 


在 执行 安装 之 前 ， 可 以 通过 Nutanix 官 方 支持 门户 网 站 获得 详尽 的 兼容 性 列表 。 在 主 菜单 中 选择 Documentation 一 Compatibility Matrix， 在 图 5-5 所 示 的 “FILTER BY” 字 段 中 ， 分 别 选 择 
Nutanix 硬 件 设备 型 号 、AOS 版 本 和 虚拟 化 Hypervisor 等 内 容 后 ， 会 列 出 具体 的 兼容 性 信息 。 此 外 ， 在 表格 底部 的 注释 ， 会 列 出 更 为 详尽 的 说 明 信 息 。 
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NX-1020 51. 0.x AHV-20150925.44 


图 5-5 Nutanix 兼 容 性 页 面 


5.1.1.3 下 载 安装 文件 


Nutanix 官 方 支持 门户 网 站 提供 了 Nutanix 部 署 所 需 的 安装 文件 、 一 键 式 部 署 工 具 Foundation 以 及 其 他 配置 工具 的 下 载 。 


你 可 以 在 浏览 器 中 打开 并 登录 http://my.nutanix.com。 选 择 “Support Portal” 进 入 Nutanix 官 方 支持 门户 ， 在 主 菜单 中 点 击 “Downloads”， 然 后 选择 所 需 页面 : 选 
择 “AOS (NOS) ”以 下 载 AOS 文 件 ， 选 择 “Foundation” 以 下 载 Foundation 文 件 ， 选 择 “Phoenix” 以 下 载 Phoenix 文 件 ， 如 图 5-6 所 示 。 
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图 5-6 Nutanix 官 方 支持 门户 下 载 页 面 
表 5-1 列 出 了 安装 Foundation 所 需 的 文件 。 你 可 以 选择 下 载 并 使 用 最 新 版 本 的 安装 文件 ， 或 者 咨询 Nutanix 客 户 支 持 人 员 取 得 其 他 兼容 的 旧版 本 软件 。 


表 5-1 Nutanix 集 群 部 署 安装 文件 清单 


文件 名 说 明 

Foundation Java 小 程序 。 需 要 此 文件 才能 在 Foundation 3.0 和 后 续 版 
本 中 执行 基于 CVM 的 Foundation 集群 安装 

此 安装 包 中 包含 Foundation Java 小 程序 。 下 载 并 提取 此 安装 包 ， 使 用 
可 以 访问 互联 网 的 工作 站 进行 Nutanix EI Z2 

此 安装 包 中 包含 Foundation Java 小 程序 。 下 载 并 提取 此 安装 包 ， 文 持 
使 用 无 法 连接 互联 网 的 工作 站 进行 Nutanix 集群 安装 
Foundation VM-version#.ovf Foundation 虚拟 机 的 OVF 文件 。 用 于 部 署 Foundation Standalone 虚拟 机 
Foundation VM-version#-disk 1.vmdk Foundation 虚拟 机 的 VMDK 文件 。 用 于 部 署 Foundation Standalone 虚拟 机 


qcow2 格式 的 Foundation 虚拟 机 的 数据 磁盘 文件 。 用 于 在 Nutanix AHV 
BY KVM E Foundation Standalone 虚拟 机 


41,5 “Foundation _VM-version#.ovf” fl "Foundation VM-version#-disk1. 


nutanix foundation applet.jnlp 


FoundationA pplet-online.zip 


FoundationA pplet-offline.zip 


Foundation VM-version#-disk1.qcow2 


Foundation VM-version#.ovf.tar vmdk” f' Foundation tar X f/-; Foundation 2.1 及 后 续 版 本 将 OVF fl VMDK 
文件 打包 为 此 tar 文 件 
(ZÈ ) 
文件 名 说 明 
Foundation-version#.tar. gz 此 tar 文件 用 于 对 已 安装 的 Foundation 进行 升级 
host-bundle-el6.nutanix. version#. tar. gz 此 tar 文件 用 于 在 Foundation 虚拟 机 中 生成 AHV ISO 镜像 


nutanix installer package-version#.tar.gz| 此 tar 文件 是 Nutanix AOS 安装 文件 


此 文件 包含 受 文 持 ISO 镜像 的 列表 。Foundation 使 用 此 白 名 单 在 进行 


iso whitelist.json ere f 
一 安装 前 验证 ISO 文件 的 MD5 fü 


Virtual Box-version#-OSX.dmg 适用 于 Mac 操作 系统 的 Oracle 虚拟 机 软件 VirtualBox B5 ZzX Fe PP 
Virtual Box-version#-Win.exe 适用 于 Windows 的 Oracle 虚拟 机 软件 VirtualBox 安装 程序 


Nutanix 官 方 支持 门户 提供 了 Nutanix 官 方 的 安装 文件 ， 如 AOS 安 装 文件 、Foundation 工 具 包 等 。 但 如 果 用 户 计划 使 用 如 vSphere ESXi、Hyper-V 或 XenServer 作 为 虚拟 化 Hypervisor， 则 
需要 到 对 应 厂商 的 支持 站 点 上 下 载 1SO 镜 像 


: VMware & 4$: http://www.vmware.com/support.html 
: Microsoft Technet: http:/ /www.mictosoft.com/zh-cn/evalcenter/ 


: Citrix £ 4$: https:/ /www.cittix.com.cn/downloads/xensetver/ 


受 支 持 的 1SO 镜 像 列表 显示 在 Foundation 验 证 ISO 镜 像 所 使 用 的 iso_whitelistjson 文 件 中 。 可 以 从 Nutanix 支 持 门 户 网 站 上 的 Foundation 页 面 下 载 最 新 版 本 的 日 名 


FA: https://portal.nutanix.com/#/page/foundation/ylist， 如 图 5-7 所 示 。 


EE Documentation v Support & Forums v Downloads v My Products v Q 


Foundation 


Getting started? 
Download the discovery applet and run it in the same network as your new nodes. 


You can also download the latestliso_whitelist.json. 


Y More Foundation Bits 


Foundation is a tool used to install a hypervisor and the Nutanix Controller VM on one or more nodes in the field. You can download the 


Foundation tool and associated files from this page. 


Note 
e Foundation 3.8 Release Notes are available here 


图 5-7 T &iso_whitelist.json 
Hypervisor 1SO 文 件 通 过 白 名 单 中 的 MD5 值 而 不 是 |SO 文 件 名 称 识别 。 因 此 ， 在 1SO 文 件 下 载 完 毕 之 后 ， 建 议 手 工 进行 MD5 值 校 验 ， 确 保 使 用 的 1SO 的 MD5 值 与 白 名 单 中 相应 的 MD5 值 相 
匹配 。 
5.1.1.4 ”规划 网 络 配 置 


在 部 署 Nutanix 集 群 之 前 ， 需 要 完成 集群 内 各 组 件 的 网 络 IP 地 址 规划 ， 包 括 所 有 节点 的 IPMI、 虚 拟 化 Hypervisor、CVM、Prism Central 的 IP 地 址 ， 以 及 客户 环境 中 基础 架构 的 网 络 信息 ， 
如 网 关 地 址 、 网 络 掩 码 、NTP 服 务 器 地 址 、DNS 服 务 器 地 址 、AD 控 制 器 地 址 等 。 

Nutanix 集 群 中 的 每 个 节点 需要 三 个 |P 地 址 ，IP 地 址 分 配 到 以 下 各 个 组 件 使 用 : 

- IPMI 接 口 

- 主机 虚拟 化 Hypervisor 

- Nutanix CVM 

CVM 和 主机 虚拟 化 Hypervisor 的 网 络 必须 位 于 同一 个 子 网 中 。 除 了 CVM 和 主机 虚拟 化 Hypervisor 以 外 的 其 他 系统 均 不 建议 位 于 该 网 络 中 。 为 了 保证 Nutanix 集 群 的 稳定 运行 ， 建 议 对 该 子 
网 进行 网 络 隔离 和 保护 。 

除了 需要 新 加 的 IP 地 址 信息 之 外 ， 还 需要 获取 用 户 网 络 的 下 列 信息 : 

默认 网 关 

- 网 络 掩 码 

: DNS 服 务 器 

: NTP 服 务 器 

: AD 控 制 器 

: HTTP 代 理 服务 器 信息 (可 选 ， 用 于 Nutanix 远 程 支持 功能 、Pluse 服 务 连 接 互 联网 使 用 ) 


为 了 保证 Nutanix 集 群 组 件 间 正 常 通信 ， 并 能 正常 访问 Nutanix 管 理 组件 ， 需 要 确认 开启 管理 和 通信 所 需 的 软件 端口 ， 准 备 需要 开放 的 端口 清单 ， 可 访问 Nutanix 官 方 支持 门户 查看 现场 安装 


指南 了 解 更 多 的 防火 墙 信 息 。 
下 面 以 部 署 一 个 四 节点 的 Nutanix 集 群 为 例 ， 网 络 IP 地 址 信息 如 表 5-2 和 表 5-3 所 示 。 


表 5-2 Nutanix 集 群 网 络 地 址 规划 


节点 名 称 CVM IPMI 
NTNX-nodeA 10.10.17.30 
NTNX-nodeB 10.10.17.31 
NTNX-nodeC 10.10.17.32 
NTNX-nodeD 10.10.17.33 


集群 名 称 NTNX Cluster 
集群 虚拟 IP. 地 址 10.10.17.100 
ISCSI 数据 服务 IP 地 址 10.10.17.101 


表 5-3 ”Nutanix 集 群 网 络 信息 汇总 


ERE 255.255.255.0 
默认 网 关 10.10.17.1 
NTP/DNS IKI 4 10.10.17.2 

AD fil at HUE 10.10.17.3 

Prism Central 10.10.17.102 

AOS 版 本 5.1.0.3 

AHV 版 本 AHV-20160925.57 
Foundation 版 本 3.7 


5.1.2 ”使 用 Foundation 部 团 Nutanix 集 群 


Foundation 是 Nutanix 提 供 的 超 融合 系统 一 键 式 部 署 工 具 ， 用 于 在 一 个 或 多 个 节点 上 安装 Nutanix AOS 及 虚拟 化 Hypervisor。 


Foundation 提 供 两 种 形态 ， 一 种 是 基于 CVM 的 Foundation， 一 种 是 VM 形态 的 Foundation Standalone。 前 者 主要 用 于 部 署 出 厂 预 置 系统 设备 或 者 已 经 完成 镜像 部 署 的 设备 创建 Nutanix 
集群 时 使 用 ， 后 者 则 用 于 对 裸 设 备 或 者 需要 重新 进行 镜像 的 设备 部 署 全 新 Nutanix 集 群 时 使 用 。 


5.1.2.1 基于 CVM 的 Foundation 创 建 Nutanix 集 群 


下 面 描述 如 何在 Nutanix 工 厂 预 装 的 节点 上 安装 虚拟 化 Hypervisor 和 Nutanix CVM ， 并 将 这 些 节点 添加 到 新 建 的 Nutanix 集 群 。 本 小 节 将 通过 Nutanix CVM 运 行 Foundation 工 具 ， 即 使 用 
基于 CVM 的 Foundation 创 建 Nutanix 集 群 。 


在 开始 之 前 ， 需 要 完成 如 下 的 准备 工作 : 
` 待 安装 节点 均 为 工厂 预 装 节点 ， 未 执行 过 设置 或 加 入 集群 的 操作 。 
. 待 安装 节点 已 经 完成 了 设备 上 架 且 已 经 连通 了 电源 及 网 络 。 
: 已 规 划 好 Nutanix 集 群 所 需 的 网 络 IP 地 址 信息 ， 如 网 关 、DNS 服 务 器 地 址 、 集 群 名 称 、 集 群 虚拟 IP 地 址 以 及 所 有 节点 的 CVM、Hypervisor 和 IPMI 的 IP 地 址 。 
- 已 下 载 部 署 所 需 的 安装 文件 ， 如 Nutanix AOS 软 件 、 虚 拟 化 Hypervisor ISO 镜像 等 。 
| 在 待 安装 节点 所 连接 的 网 络 上 启用 IPv6， 且 启用 IPv6 的 广播 和 多 播 。 


. 如 果 节 点 包含 自 加 密 驱 动 器 (SED) ， 需 要 在 安装 节点 前 禁用 SED 的 加 密 功 能 。 如 果 节 点 仅 包 含 SED， 可 在 安装 完成 后 启用 加 密 。 如 果 节 点 既 包 含 了 常规 机 械 磁 瘟 (HDD) ,又 有 自 加 密 


驱动 器 (SED) ， 在 集群 运行 期 间 请 勿 启用 SED 加 密 。 


要 安装 节点 并 创建 集群 ， 请 执行 以 下 操作 : 


序 ， 如 工作 站 无 法 连接 互联 网 ， 则 先 下 载 “FoundationApplet-offline.zip” 复 制 到 工作 站 后 解压 获得 Foundation Java 小 程序 。 


a) 所 有 节点 和 工作 站 需要 在 同一 广播 域 或 在 未 配置 VLAN 的 网 络 中 ， 可 直接 使 用 Foun-dation Java 小 程序 来 发 现 节点 ， 然 后 使 用 该 工具 在 任 一 已 发 现 节 点 上 启动 基于 CVM 的 


Foundation, 


b) 如 网 络 已 配置 VLAN， 则 需要 先 使 用 网 络 配 置 工具 为 任 一 节点 指定 VLAN、 配 置 |P 地 址 ， 然 后 在 该 节点 上 运行 基于 CVM 的 Foundation， 以 友 现 位 于 其 他 VLAN 中 的 节点 。 
i. 将 待 安装 的 Nutanix 节 点 连接 到 交换 机 。 


ii 使 用 root 账 户 登录 任 一 节点 ， 并 将 工作 目录 修改 为 /root/nutanix-network-crashcart/， 然 后 运行 如 下 命令 ， 启 动 网 络 配置 工具 : 


root@ahv# ./network configuration 


ii. 在 网 络 配 置 工具 中 ， 查 看 网 卡 详情 ， 确 定 接口 属性 并 识别 连接 的 接口 。 
iv. 使 用 键盘 箭头 按键 移动 到 需要 配置 的 接口 ， 并 使 用 空格 键 选 定 每 个 接口 。 


v. 使 用 键盘 箭头 按键 导航 到 用 户 接 口 ， 并 输入 VLAN 标 记 (VLAN Tag) 、 子 网 掩 码 (Netmask) 、 子 网 网 天 (Gateway) 、CVM IP 地 址 (CVM IP) 及 虚拟 机 Hypervisor IP 地 址 
(Hypervisor IP) , 


vi. 使 用 键盘 箭头 按键 移动 到 “Done” ， 并 按 下 回 车 键 ， 完 成 网 络 配置 。 


ic 1. 上 述 网 络 配置 工具 可 以 将 IP 地 址 分 配 到 CVM 和 Hypervisor。 可 通过 已 经 完成 网 络 配 置 的 主机 上 的 基于 CVM 的 Foundation 来 发 现 并 安装 其 他 Nutanix 节 点 。Foundation 使 用 VLAN 探 查 
器 来 检测 可 用 的 Nutanix 节 点 (包括 位 于 其 他 VLAN 中 的 节点 ) 。VLAN 探 查 器 使 用 IPv6 的 邻居 发 现 协 议 ， 因 此 节点 连接 到 的 物理 交换 机 需 支 持 IPv6 广 播 和 多 播 。 在 镜像 过 程 中 ， 基 于 CVM 的 
Foundation 还 会 将 指定 的 VLAN 标 记 ( 假 设 为 生产 VLAN 的 标记 ) 分 配 到 已 选 节点 上 的 相应 接口 ， 因 此 无 须 为 这 些 节 点 执行 VLAN 分 配 任务 。 


2. 网 络 配置 工具 可 以 用 在 未 创建 集群 的 工厂 预 装 节点 上 ， 对 于 已 经 加 入 Nutanix 集 群 的 节点 使 用 该 工具 ， 可 能 会 导致 该 节点 无 法 访问 原 有 集群 中 的 其 他 节点 。 解 决 该 问题 的 唯一 方法 是 通过 网 
络 配 置 工具 将 该 节点 重新 配置 回 原 有 的 IP 地 址 。 


2) 启动 Foundation 界 面 ， 以 显示 所 有 已 发 现 的 机 箱 和 节点 信息 ， 不 同 的 网 络 环境 ， 启 动 Foundation 的 方式 有 所 区 别 ]: 


a) 同一 广播 域 中 的 节点 ， 和 直接 使 用 Foundation Java 小 程序 选 定 一 个 可 用 节点 ， 点 击 “Launch Foundation” 打 开 Foundation 界 面 即 可 ， 如 图 5-8 所 示 。 


Recycle Bin Mozilla 
Firefox 


一 i — 
> DS $ $4 Cn 
二 名 x BB: 


Cyqwin64 Google Foundation. |VMware-V.... nutanix inst... 
Terminal Chrome nip 


e 


VMware — phoenix-21... installer-el6... 
vSphe... 


| S| Foundation Launcher fo le i ES | 


NG Model | Serial Number | Position | Foundation | Status 

[4 NX- 3050 14SM36030032 A 

Oracle VM desktop.ini NX-3060 14SM36030032 B Free 

VirtualBox 14SM36030032 > 3 Free 

NX-3060 14SM36030032 bug35580 Free 

NX-6060 NX123455789 A master Free 
TPHI NX-1020 811318724C17481 update packa.. Unavailable 
View NX-1020 811318724C17481  / update packa.. Unavailable 

E F4 NX-1020 811318724C17481 update packa.. Unavailable 

VPN Access IPMIView20 

Manager 


| Retry discovery | | Launch Foundation | | Exit | 


图 5-8 Foundation 启动 程序 窗口 


b) 对 于 VLAN 分 段 网 络 中 的 节点 ， 则 需要 通过 访问 已 经 配置 好 网 络 信息 的 CVM 上 的 Foundation 服 务 来 打开 Foundation 界 面 。 打 开工 作 站 的 浏览 器 访问 http://CVM IP: 8000， 其 中 
CVM_IP 为 上 一 步 网 络 配置 工具 中 输入 的 CVM 1P 地 址 。 


3) 选择 节点 并 设 定 见 余 因 子 (RF) ， 在 Foundation 用 户 界 面 中 ， 系 统 将 显示 已 发 现 的 机 箱 和 节点 信息 ， 包 括 可 用 的 节点 以 及 存在 于 其 他 集群 中 的 不 可 用 的 机 箱 和 节点 。 


a) 选择 要 安 六 的 节点 ， 义 选 要 安 六 的 可 用 节点 的 复 选 框 后 ， 点 击 “Next” 进 入 下 一 步 ， 如 图 5-9 所 示 。 


Os 1. 如 你 要 安装 的 目标 节点 已 加 入 其 他 集群 ， 必 须 先 将 目标 节点 从 集群 中 删除 ， 或 者 销毁 (Destroy) 目标 节点 所 在 集群 ， 以 将 目标 节点 变 为 可 用 状态 。 
2. 一 个 Nutanix 集 群 至 少 需 要 3 个 节点 。 因 此 ， 必 须 选 择 至 少 3 个 节点 。 
3. 如 果 已 发 现 节点 带 有 VLAN 标 记 ， 则 将 显示 该 标记 。EFoundation 在 安装 节点 时 将 应 用 现 有 的 VLAN 标 记 ， 但 无 法 使 用 Foundation 来 编辑 该 标记 或 将 该 标记 添加 到 不 带 标 记 的 节点 。 


4. 如 需要 构建 两 个 或 两 个 以 上 的 ESXi 节 点 与 AHV 节 点 混合 集群 ， 需 要 在 选择 镜像 时 义 选 “多 Hypetvisor 集 群 ”。 


© 1. Discover Nodes 2. Define Cluster 3. Setup Node 4. Select Images 5. Create Cluster 


Discover Blocks and nodes. 


Missing nodes? Rerun discovery. 


Select All - Deselect All - Change RF (2) Show only new nodes 
Ba A VLAN O BA 
B VLAN O B VLAN O 
C VLAN O Bü c 
ü ov 


图 5-9 Foundation X IL% BR vg 


b) 设 定 集 群 见 余 因 子 (RF) ， 勾 选集 群 的 见 余 因 子 “RF 2" my "RF3" , gx "Save Changes ”保存 设置 ， 进 入 集群 参数 配置 步骤 ， 如 图 5-10 所 示 。 


w RF 2 


RF 3 


Redundancy Factor 2 
With redundancy factor 2, the cluster can tolerate up to 1 
simultaneous node failures. Minimum 3 nodes are needed for cluster 


creation. 


Cancel Save Changes 


图 5-10 Foundation k € CAA STR 


Qs 1. 集 群 的 元 余 因 子 默 认 设 置 为 >， 表示 数据 共有 两 份 副本 ， 集 群 可 以 容忍 任 何 一 个 节点 或 驱动 器 故障 ，RF 2 要 求 集群 至 少 有 3 个 节点 。 


2. 宛 余 因 子 为 3， 表 示 数 据 将 在 集群 中 存储 三 份 副本 ， 且 集群 可 以 容忍 位 于 不 同 区 块 中 的 任何 两 个 节点 或 驱动 器 故障 。 将 宛 余 因子 设置 为 3 要 求 集群 至 少 有 5 个 节点 ， 且 仅 在 创建 集群 时 启用 。 


(同时 在 创建 存储 容器 时 必须 设置 宛 余 因子 为 3， 以 使 得 虚拟 机 (Guest VM) 的 数据 能 容忍 两 个 节点 的 故障 。 


ess 


4) 定义 集群 ， 设 置 集群 参数 ， 如 集群 名 称 、 网 络 参数 、 时 区 等 信息 ， 如 图 5-11 所 示 。 


© 1. Discover Nodes 2. Define Cluster 3. Setup Node 4. Select Images 5. Create Cluster 


New Cluster Setup 


Set up general nformation to create and connect your cluster to the network 


Cluster Information 


Set up cluster level information like cluster name and IP address. 


CLUSTER NAME NTP SERVER ADDRESS (OPTIONAL) TIME ZONE (OPTIONAL) 


Select Time Zone w 


IP ADDRESS (OPTIONAL) DNS SERVER IP (OPTIONAL) 
CONFIGURE IPMI IP 


Network Information 


This is some basic information about your Hypervisor, CVM, IPMI IPs. 


CVM and Hypervisor 


NETMASK 
GATEWAY 


CVM MEMORY (OPTIONAL) 


Post Imaging Tests 


This enables a series of tests to ensure that the cluster has been correctly configured and everything is running smoothly. 


ENABLE TESTING 


图 5-11 Foundation € 3L E 2E A ig 
a) 在 集群 信息 (Cluster Information) 中 ， 输 入 如 下 信息 : 
i 集群 名 称 (Cluster Name) ， 输 入 5.1.1.4 节 的 规划 网 络 配置 中 定义 的 集群 名 称 。 
ii. 集 群 虚拟 IP 地 址 (IP Address) ， 该 地 址 是 新 建 集群 的 虚拟 IP 地 址 ， 该 参数 对 于 ESXi 或 AHV 集 群 可 选 ， 对 于 Hyper-V 集 群 为 履 填 参数 。 
ii.NTP 服 务 器 地 址 (NTP Server Address) ， 输 入 NTP 服 务 器 地 址 或 域名 ， 如 0.pool.ntp.org。 
该 参数 为 可 选 参数 。 
iv.DNS 服 务 器 地 址 (DNS Server IP) ， 输 入 DNS 服务 器 IP 地 址 。 该 参数 为 可 选 参数 。 
v. 时 区 (Time Zone) ， 选 择 集群 的 时 区 。 该 参数 为 可 选 参数 。 
b) 配置 IPMI IP 地 址 ， 该 参数 为 可 选 参数 。 当 勾 选 该 设置 后 ， 将 出 现 I|PMI 的 设置 参数 ， 以 更 新 I|PM| 参 数 ， 但 Foundation 不 要 求 I|PMI 连 接 。 
c) 填写 网 络 信息 ， 包 括 CVM 和 Hypervisor 的 参数 : 
ij. 网络 掩 码 (Netmask) ， 输 入 CVM 和 Hypervisor 所 在 子 网 的 掩 码 。 
i. 网 关 (Gateway) ， 输 入 网 关 IP 地 址 。 
i.CVMPjfz (CVM Memory) ， 该 参数 为 可 选 参数 。 定 义 新 建 集群 中 CVM 内 存 大 小 。 
d) 配置 Enable Testing 参 数 ， 该 参数 为 可 选 参数 。 在 集群 创建 完成 之 后 运行 Nutanix Cluster Check (NCC) 工具 检查 集群 状态 。 
g) 点 击 “Next”， 进 入 集群 中 节点 安装 页 面 。 


5) 安装 节点 ， 指 定 要 安装 节点 的 配置 信息 ， 如 各 节点 CVYM、Hypervisor 和 IPMI 的 iP 地址， 按照 5.1.1.4 节 中 规划 的 内 容 填 写 地 址 信息 ， 如 图 5-12 所 示 。 点 击 “Validate Network” 验 证 所 
填 地 址 是 否 互通 ， 如 验证 通过 进入 下 一 步 选择 镜像 ， 如 验证 未 通过 ， 存 在 冲突 的 地 址 将 以 红色 突出 显示 ， 修 改 后 重新 执行 验证 ， 直 到 进入 下 一 步 。 
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Node Setup 
Set up the IP addresses of your nodes 

Clear IPs and Hostnames 
Hostnames and IP Range 
Specify the IP Range for the Nodes. 
Hypervisor Hostname CVM IP Hypervisor IP 
ENTER HOSTNAME FROM / TO FROM / TO 
Manual Input 
Manually fill in the IP Range for the Nodes. Reorder Blocks 
HYPERVISOR HOSTNAME CVM IP HYPERVISOR IP 
HYPERVISOR HOSTNAME CVM IP HYPERVISOR IP 


< Prev Validate Network > 


图 5-12 ”Foundation 安装 节点 页 面 
OO, Nutanix 的 高 可 用 性 特性 要 求 Hypervisor 管 理 地 址 和 CVM 地 址 位 于 同一 子 网 。 将 它们 置 于 不 同 子 网 将 减弱 Nutanix 提 供 的 故障 保护 ， 并 且 可 能 会 导致 其 他 问题 。 因 此 ， 强 烈 建议 将 虚 
拟 化 软件 管理 地 址 和 CVM 地 址 置 于 同一 子 网 。 


6) 选择 镜像 ， 指 定 或 上 传 要 使 用 的 Nutanix AOS 和 虚拟 化 Hypervisor 镜 像 文 件 。 当 你 所 选 的 节点 类 型 中 有 专用 的 存储 节点 类 型 时 ， 页 面 将 提示 你 可 以 创建 “ 单 Hypervisor 集 群 ” 或 “多 
Hypervisor 集 群 ”， 人 否则 你 将 不 会 收 到 选择 提示 ， 而 直接 进入 单 Hypervisor 集 群 的 镜像 选择 页 面 ， 如 图 5-13 所 示 。 


© 1. Discover Nodes 2. Define Cluster 3. Setup Node 4. Select Images 5. Create Cluster 


Image Selection 


You can select AOS and Hypervisor ISO images for your nodes 
AOS 
Installed Version: 5.1 
AVAILABLE PACKAGES # Manage 
Select Package bd 


Hypervisor 
Installed Type: AHV 
Installed Version: el6.nutanix.20160925.40 


HYPERVISOR TYPE 


Select Hypervisor v 


AVAILABLE PACKAGES 


View whitelist (02/12/2017) 


图 5-13 Foundation 选择 镜像 页 面 
a) 选择 Nutanix AOS 镜 像 ， 通 过 下 拉 菜 单 选择 可 用 的 AOS 镜 像 ， 如 没有 要 安装 的 AOS 镜 像 ， 可 以 通过 点 击 “Manage” 上 传 AOS 镜 像 。 


b) 选择 Hypervisor 镜 像 ， 通 过 下 拉 菜 单 选择 Hypervisor 类 型 ， 然 后 选择 该 Hypervisor 可 用 的 镜像 。 


Os 1. 在 “多 Hypertvisot 集 群 ” 中 ， 选 定 的 ESXi 将 安装 在 计算 节点 ，AHV 将 安装 在 存储 节点 上 ， 且 无 法 选择 AHV 人 安装 包 。Foundation 将 使 用 AOS 安 装 程序 中 自 带 的 AHV 人 安装 包 。 
2. 若 安装 Hypet-V， 要 安装 的 节点 必须 配置 一 个 64 GB DOM， 且 支持 如 下 五 个 版 本 的 HypetrV 英 文 版 : Free. Standard. Datacenter. Standard with GUI, Datacenter with GUI. 
3. 若 安装 的 AHV 版 本 不 同 于 Nutanix AOS 安 装 程序 中 的 版 本 ， 可 以 选择 上 传 新 的 AHV 镜 像 。 


4. 选 择 的 Hypertvisot 镜 像 应 在 兼容 性 白 名 单 之 中 ， 可 以 通过 “Update the whitelist” 来 上 传 最 新 的 兼容 性 白 名 单 。 


C) 对 节点 进行 镜像 安装 ， 创 建新 集群 ， 点 击 “Create” 继续。 


Qi. 1. 如 果 只 是 创建 集群 ， 而 不 安装 节点 ， 则 可 选择 点 击 “Skip”。 但 只 有 在 所 有 节点 具有 相同 版 本 的 虚拟 化 软件 和 AOS 时 才能 使 用 该 按钮 ， 如 果 版 本 不 同 ， 无 法 使 用 此 选项 。 
2. 如 果 集 群 中 有 NX-6035C 型 号 的 节点 (用 作 冷 存储 ) ， 那 么 无 论 运行 于 其 他 节点 上 的 虚拟 化 软件 是 什么 类 型 ，“Skip” 按 键 都 是 可 用 的 。 


7) 创建 集群 ， 在 完成 镜像 选择 ， 点 击 “Create” 或 “Skip” 按 钮 之 后 ， 跳 转 到 创建 集群 页 面 ， 该 页 面 会 实时 更 新 节点 安装 和 集群 创建 的 进度 信息 ，Foundation 会 先 安装 一 个 节点 ， 然 后 再 
续 到 其 他 节点 。 


a) 监控 节点 安装 和 集群 状态 ， 如 图 5-14 所 示 。 顶 部 进度 条 显示 整体 进度 ， 蓝 色 为 正常 ， 红 色 则 表示 出 现 问 题 ; 集群 创建 状态 显示 状态 指示 器 、 集 群 名 称 、 进 度 消息 和 日 志 链 接 ; 节点 状态 
显示 所 有 节点 的 状态 指示 器 、IPM1 IP、 进 度 消息 和 日 志 链 接 。 
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Showing Cluster creation progress 


Overall Progress (2%) Log 


" | 


Cluster Creation Status 


STATUS CLUSTER NAME PROGRESS LOG 


Idle (O96) 


Node Status 


STATUS HYPERVISOR IP PROGRESS LOG 
I 
This node will be imaged later (2%) 
! 
This node will be imaged later (2%) log 
! 
This node will be imaged later (296) 


Running (3%) 


图 5-14 Foundation] x 4E f 3i t 
Qi. 1. 启 动 Foundation 时 选 定 的 节点 将 最 先 安 装 ， 当 该 节点 完成 实 装 后 ， 剩 余 节 点 会 同步 安装 。 安 装 过 程 约 需 30 分 钟 ， 总 耗 时 约 为 一 小 时 (第 一 个 节点 需 30 分 钟 ， 其 他 同步 镜像 的 节点 
也 需 30 分 钟 ) 。 
2. 点 击 顶部 的 “Log 链接 后 ， 可 在 单独 选项 卡 或 窗口 中 查看 “foundation.out 日 志 内 容 ， 以 监控 总 体 进度 。 点 击 某 节 点 的 “Log 链接 可 在 单独 选项 卡 或 窗口 中 查看 该 节点 的 日 志文 件 。 
3.Foundation 进 行 节点 安装 时 ， 最 多 可 同步 处 理 20 个 节点 。 如 果 集 群 包含 超过 21 个 节点 ， 那 么 Foundation 会 自动 将 每 20 个 节点 分 为 一 组 ， 这 会 导致 额外 增加 30 分 钟 处 理 时 间 。 


4. 集 群 创 建 的 速度 比较 快 ， 但 如 果 启 用 了 “Enable Testing”， 那 么 集群 创建 完成 后 会 运行 NCC， 此 步骤 可 能 需要 稍 长 时 间 。 点 击 集群 的 “Log ”链接 可 在 单独 选项 卡 或 窗口 中 查看 该 集群 的 日 
志文 件 。 


b) 等 待 集群 创建 完成 后 ,会 提示 “Cluster creation successful! " ， 这 表示 已 成 功 为 集群 中 的 所 有 节点 安装 虚拟 化 软件 和 Nutanix CVM (如 未 选择 Skip 的 话 ) ， 并 已 成 功 创建 集群 ， 如 
图 5-15 所 示 。 


1. 点 击 页 面 中 “Prism” 的 链接 ， 可 以 打开 Prism 控 制 人 台 ， 使 用 默认 账户 “admin” 及 默认 密码 “admin” 开 始 配置 该 集群 ， 退 出 Foundation。 


i 点 击 “Export logs” 。 下 载 日 志文 件 ， 这 会 将 所 有 日 志文 件 打包 为 log_archive.tar 文 件 。 


Qs 1.Foundation 服 务 会 在 完成 安装 后 两 小 时 关闭 ， 如 果 超 过 两 小 时 以 上 ， 访 问 创建 成 功 页 面 时 ，“Expofttlopgs” 链 接 会 失效 ， 可 打开 浏览 器 访问 任 一 CVM 的 也 地 址 。 如 果 显 示 Ptism 


Web 控 制 台 ， 则 表示 安装 已 完成 ， 可 通过 ssh 访 问 CVM， 从 ~/data/logs/foundation 获 取 安 装 日 志 。 


2. 如 果 刷 新 页 面 后 未 加 载 任何 项 〈 或 加 载 配置 页 面 ) ， 则 在 浏览 器 中 输入 http://cvm ip， 若 已 完成 安装 ， 则 可 以 打开 Prism 控 制 台 界面 。 如 果 未 打开 ， 则 在 浏览 器 中 输入 http://cvm ip: 


8000/gui， 将 显示 Foundation 安 装 进 度 监 控 页 面 。 


5. Create Cluster 


Cluster creation successfull! 


© 


| 打开 Prism Web 
Manage your cluster with Prism. 
Export logs Console 配置 集群 


[5-15 ”Foundation 创 建 集群 完成 页 面 


c) 如 果 集 群 创建 未 完成 ， 则 要 查看 并 纠正 问题 ， 然 后 重启 集群 创建 过 程 。 当 安装 进度 条 变 为 红色 ， 并 提示 “安装 出 现 错误 ”时 ， 点 击 “Back to config” 跳 转 回 配置 页 面 ， 纠 正 错误 信息 
后 重新 进入 集群 创建 过 程 ， 如 图 5-16 所 示 。 


sy. -— ; 
Qs 1. 默 认 的 各 节点 安装 超时 时 限 为 30 分 钟 (ESXi) 34602740 (HyperV 和 AHV) ， 届 时 可 能 所 有 节点 〈 每 批 最 多 20 个 节点 ) 均 成 功 完成 ， 也 可 能 会 提示 出 现 问题 。 


2. 安 装 问题 通常 发 生 在 首 个 节点 的 镜像 过 程 中 。 在 该 情况 下 ，Foundation 不 会 尝试 安装 其 他 节点 ， 因 此 只 有 第 一 个 节点 会 处 于 不 稳定 状态 。 解 决 问题 之 后 ， 便 可 重新 安装 第 一 个 节点 ， 然 后 正 


Log 


Cluster Creation Status 


STATUS CLUSTER NAME PROGRESS LOG 


mycluster fatal (100%) 


Node Status 


STATUS IPMI IP PROGRESS LOG 
10.1.227.29 Imaging complete (100%) 
101.227.30 Imaging complete (100%) 


nz ea 101.227331 fatal (33%) 


图 5-16 Foundation 创建 集群 未 完成 页 面 


8) 完成 集群 创建 后 ， 便 可 以 登录 Prism 控 制 台 ， 完 成 集群 的 初始 配置 。 详 细 操 作 可 参见 后 续 章 节 中 的 内 容 。 
5.1.2.2 Foundation Standalone 创 建 Nutanix 集 群 


Foundation Standalone 是 基于 独立 的 Foundation 虚 拟 机 的 Nutanix 节 点 安装 工具 ， 使 用 该 工具 可 以 为 裸 节 点 安装 虚拟 化 Hypervisor (如 Nutanix AHV, Citrix XenServer, VMware 
vSphere 或 Microsoft Hyper-V) 和 Nutanix CVM ， 并 为 一 个 或 多 个 集群 配置 安装 节点 。 所 谓 的 裸 节点 是 指 并 非 工厂 预 装 或 者 无 法 通过 发 现 流程 检测 到 的 节点 ， 当 然 也 可 使 用 此 方法 来 刷新 出 三 
时 已 经 预 装 系统 的 节点 。 


使 用 Foundation Standalone 安 装 节点 创建 Nutanix 集 群 之 前 ， 需 要 完成 如 下 准备 工作 : 

. 待 安装 的 节点 已 经 完成 了 设备 上 架 ， 且 连通 了 电源 及 网 络 。 

.将 待 安装 节点 BIOS 中 的 启动 设备 顺序 设置 为 “虚拟 CD-ROM” (默认 设置 ) ， 和 否则 将 出 现 Foundation 超 时 错误 。 

* 待 安装 节点 未 连接 任何 虚拟 介质 的 设备 (如 USB 端 口 插入 光驱 ) ， 如 果 在 待 安 装 节点 挂 载 了 ISO 镜 像 的 虚拟 CD-ROM， 则 可 能 与 Foundation 安 装 相 冲突 。 


节点 连接 的 网 络 设备 上 需要 禁用 STP (生成 树 协 议 ) ， 否 则 可 能 会 导致 Foundation 在 节点 安装 镜像 过 程 中 超时 。 


` 准备 好 安装 所 需 的 全 局 、 节 点 和 集群 参数 值 。CVM 不 支持 使 用 DHCP 服 务 器 ， 请 务必 为 CVM 分 配 静 态 IP 地 址 。 
- Foundation Standalone 虚 拟 机 的 IP 地 址 需要 与 待 部 署 的 Nutanix 集 群 在 同一 个 网 络 中 。 


如 果 节 点 包含 自 加 窗 驱 动 器 (SED) ， 需 要 在 安装 节点 前 禁用 SED 的 加 密 功 能 。 如 果 节 点 仅 包 含 SED， 可 在 安装 完成 后 启用 加 密 。 如 果 节 点 既 包 含 了 常规 机 械 磁 瘟 (HDD) ,又 有 自 加 密 


驱动 器 (SED) ， 在 集群 运行 期 间 请 勿 启用 SED 加 密 。 
要 安 闭 节 点 并 创建 集群 ， 请 执行 以 下 操作 : 


1) 准备 工作 站 ， 参 照 5.1.1 节 环境 准备 中 的 内 容 下 载 Foundation Standalone VM 文件 、Nutanix AOS 镜 像 ， 安 装 好 Oracle VM VirtualBox 软 件 ， 部 署 Foundation Standalone 虚 拟 机 并 
设置 网 络 。 


a) 准备 一 台 工 作 站 (要 求 满足 如 下 配置 : >3GB 内 人 存 ，>25GB 存 储 空间 ， 干 兆 物 理 网 卡 ) ， 使 用 默认 选项 安装 Oracle VM VirtualBox， 在 工作 站 个 人 文件 夹 中 创建 一 个 名 为 “VirtualBox 
VMs” 的 文件 夹 ， 将 Foundation VM 文 件 复制 到 该 文件 夹 中 。 


b) 启动 Oracle VM VirtualBox, $A "Foundation VM-version#.ovf” 文 件 ， 并 局 动 导入 后 的 虚拟 机 。 
C) 使 用 默认 账号 “root” 及 密码 “nutanix/4u” 进 入 Foundation Standalone 虚 拟 机 ， 并 配置 Foundation Standalone 虚 拟 机 网 络 。 


i .双击 Foundation Standalone 虚 拟 机 桌面 上 名 为 “set foundation ip address” 的 图 标 ， 如 图 5-17 所 示 。 


Computer 


foundation 


set foundation jp 
addre 


Terminal Nutanix 
Foundation 


图 5-17 Foundation Standalone # 拟 机 桌面 


ii. 在 弹出 的 窗口 中 ， 点 击 “Run in Terminal” 按 钮 ， 如 图 5-18 所 示 。 


Computer PT 
nutanix's Home eon 


foundation 


4/7» Do you want to run 
Terminal Sy "set foundation — ip address", 
» or display its contents? 
"set foundation ip address" is an executable text file. 


Display | | Cancel | | 


图 5-18 Foundation Standalone Æ 拟 机 终端 窗口 


ii. 在 终端 窗口 的 “Select Action" HEF, wt "Device configuration” ， 如 图 5-19 所 示 。 


iv.f£ "Select A Device” 框 中 ， 选 择 "ethO" ， 如 图 5-20 所 示 。 


[E] Terminal 


File Edit View Search Terminal Help 


Tam 
| 
Select Action 
Jevice configurati 
DNS configuration 
Save&Quilt 
- Tabs 一 1 "= Tz hz )etween el ements -i eg selec z - Fl 2 ne E "eef l=] 


图 5-19 Foundation Standalone FE Jud VE FE 


Terminal 


File Edit View Search Terminal Help 


<Tab>/<ALt-Tab> between elements | <Space> selects | «F12» next screen 


图 5-20 Foundation Standalone HE 拟 机 设备 配置 


v.f£Network Configuration 框 中 ， 删 除 “Use DHCP” 字段 中 的 星 号 (在 默认 情况 下 设置 ) ， 在 “Static IP”“Netmask” 和 “Default gateway IP” 字 段 中 输入 相应 的 地 址 ， 然 后 点 
i "OK 按钮 ， 如 图 5-21 所 示 。 


Terminal 


File Edit View Search Terminal Help 


iatna rke Cantar =m oe mm 
Network Configuration 


Name 

Device 

Use DHCP 

Static IP 

Netmask 

Default gateway IP 
Primary DNS Server 
Secondary DNS Server 


<Tab>/<ALt-Tab> between elements | <Space> selects | <F12> next screen 


图 5-21 Foundation Standalone 虚 拟 机 网 络 配 置 


#24040 "Select Action” 框 中 的 “Save&Quit” 按 钮 。 此 操作 将 保存 配置 并 关闭 终端 窗口 。 
d) 将 已 下 载 好 的 nutanix_installer_ package-version#.tar.gz 文 件 上 传 到 Foundation Standalone 虚 拟 机 的 /home/nutanix/foundation/nos 文 件 夹 。 


e) 如 需要 安装 非 AHV 的 虚拟 化 Hypervisor， 如 ESXi 或 Hyper-V， 需 下 载 满 足 兼 容 性 的 虚拟 化 Hypervisor 镜 像 ， 并 将 虚拟 化 Hypervisor 上 传 到 对 应 的 Foundation standalone 虚 拟 机 的 文件 
夹 中 。 


Os 1.ESXi ISO 镜像 目录 : /home/nutanix/foundation/isos/hypervisor/esx。 

2.Hyper-V ISO 镜像 目录 : /home/nutanix/foundation/isos/hypervisor/hyperv o 

3. 无 须 提 供 AHV 镜 像 ， 因 为 Foundation 已 将 AHV tar 文 件 放 置 在 /home/nutanix/foundation/isos/hypervisor/kvm 目 录 中 。 

f) 配置 好 Foundation standalone 虚 拟 机 网 络 ， 上 传 完 安装 文件 及 镜像 后 ， 工 作 站 的 准备 工作 就 已 经 完成 了 。 

2) 设置 网 络 连接 。 通 过 Foundation Standalone 安 装 节 点 之 前 ， 需 要 在 现场 完成 网 络 环境 的 正确 配置 。 以 Nutanix NX 系列 节点 为 例 ， 只 需要 将 每 个 待 安装 节点 的 第 一 个 1GbE 接 口 连 接 到 
干 兆 交 换 机 即 可 。 

Qus 1. 不 同 节 点 类 型 的 网 络 接口 位 置 不 同 ， 可 在 Nutanix 官 方 支持 网 站 查看 所 使 用 型 号 的 硬件 文档 ， 确 定 端口 位 置 。 

2. 如 果 待 安装 节点 为 联想 HX 或 Dell XC 系 列 ， 则 网 络 端口 连接 方式 与 Nutanix NX 节 点 不 同 ， 具 体 连 接 方式 需要 参考 Nutanix 官 方 支持 网 站 的 安装 文档 。 

3.Nutanix 官 方 建议 使 用 无 路 由 表 的 扁平 交换 机 ， 以 防止 可 能 会 影响 生产 环境 的 配置 错误 。 


3) 设置 节点 参数 ， 按 照 5.1.1.4 节 规划 网 络 配置 中 的 内 容 ， 为 待 安装 节点 配置 虚拟 化 Hypervisor IP 地 址 、CVM 1P 地 址 和 IPMI 接 口 信息 。 点 击 Foundation Standalone 虚 拟 机 桌面 上 
的 “Nutanix Foundation” 图 标 ， 以 启动 Foundation GUI1， 如 图 5-22 所 示 。 上 此外， 因为 已 经 为 Foundation Standalone 虚 拟 机 分 配 了 IP 地 址 ， 因 此 也 可 以 支持 从 其 他 设备 上 访 
间 http://Foundation VM IP: 8000/gui/index.html 进 行 Foundation 界 面 的 访问 。 
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nutanix's Home 


一 一 | foundation 


| | 
Trash t foundation ip 
address 


) 


Terminal 


图 5-22 dTJFFoundation GUI 


a) f£ "Node Config" Mimi, Foundation Standalone 虚 拟 机 会 自动 友 现 网 络 中 未 配置 的 Nutanix 节 点 ， 如 图 5-23 所 示 。 如 果 想 要 安装 其 他 的 裸 节点 ， 需 要 保证 待 添加 节点 已 从 原 有 集 


群 中 移 除 ， 然 后 点 击 “Add Blocks”， 弹 出 “添加 裸 节 点 ”窗口 。 
SEL 


b) 在 “添加 裸 节点 ”窗口 中 ， 填 写 要 添加 机 箱 数 量 “Number of Blocks” 和 每 个 机 箱 中 节点 数量 “Nodes per Block” ， 填 写 完 成 之 后 ， 点 击 “Create” 按 钮 。 新 增 的 机 箱 会 显示 在 下 面 


的 列表 中 。 


c) 设置 新 增 机 箱 和 节点 的 信息 ， 系 统 自动 分 配 “Block ID" 。 


BA 1 Node Config 2. Global Config 3. Node Imaging 4. Clusters 


Available Nodes: (3) 


Select All - Unselect All - Ping Scan 


Block/Node Configuration Switch to software-only installation 
Reorder Blocks 
STORAGE 
BACKUP 
BLOCK ID POSITION PMI MAC ADDRESS IPMI IP HYPERVISOR IP CVM IP HYPERVISOR HOSTNAME ONLY 
NODE 
NODE 
10.5.50.56 + 5.5170 * 5.50.35 + x 
Block-1 A 01:23:45:67:89:ab 10.5.50.56 10.5.5170 10.5.50.35 NTNX-Block-1-A x 
B 01:23:45:67:89:cc 10.5.50.59 10.5.51.73 10.5.50.38 NTNX-Block-1-B 
C 1:23:45:67:89:e )5.50.62 10.5.5176 10.5.50.41 NTNX-Block-1-C 
Next > 


图 5-23 节点 配置 页 面 
i. “Position” 为 待 安装 节点 在 机 箱 中 的 放置 位 置 ， 可 以 通过 复 选 框 来 义 选 要 安 六 的 节点 。 
i 在“IPMI MAC Address” 文 本 框 中 输入 对 应 待 安装 节点 的 IPMI MAC 地 址 。 
ii. 将 IPMI 端 口 的 IP 地 址 到 填 入 “IPMI IP" , 
iv. 将 虚拟 化 Hypervisor 的 IP 地 址 填 入 “Hypervisor IP” , 


v. 将 CVM 1P 地 址 填 入 “CVM IP” , 


Vi. 系统 会 自动 分 配 Hypervisor 主 机 名 称 “Hypervisor Hostname”， 如 需 更 新 ， 可 在 “Hypervisor Hostname” 文本 框 中 编辑 。 


vii. 如 待 安装 节点 类 型 为 NX-6035C 系 列 ， 可 以 勾 选 “storage Only Node" Site, 


Qa 1.IPMI 端 口 连接 的 是 二 层 交 换 机 时 ，IPMI IP 地 址 必须 与 Foundation VM 处 于 相同 的 子 网 ， 除 非 在 后 面 的 全 局 参数 配置 页 面 设置 了 “multi-homing - 
2.IPMI MAC 地 址 可 以 在 待 安装 节点 的 地 址 标签 上 查找 到 ， 如 图 5-24 所 示 。 
3. 如 果 选 择 自动 分 配 IP 地 址 ， 则 不 会 使 用 以 0 、1、254 或 255 结 尾 的 地 址 ， 因 为 此 类 地 址 通常 由 网 络 管理 员 保 留 。 


4.Nutanix 的 高 可 用 性 特性 要 求 Hypervisor 管 理 地 址 和 CVM 地 址 位 于 同一 子 网 。 将 它们 置 于 不 同 子 网 将 减弱 Nutanix 提 供 的 故障 保护 ， 并 且 可 能 会 导致 其 他 问题 。 因 此 ， 强 烈 建议 将 虚拟 化 软件 
管理 地 址 和 CVM 地 址 置 于 同一 子 网 中 。 


5.Windows 计 算 机 名 称 (JF Hyper-V) 不 得 超过 15 个 字符 。 自 动 生 成 的 名 称 可 能 长 于 15 个 字符 ， 这 会 导致 Windows 环 境 中 的 多 个 主机 有 具有 相同 的 截断 名 称 。 因 此 ， 请 勿 为 Hyper-V 虚 拟 化 软件 
使 用 长 于 15 个 字符 的 自动 生成 名 称 。 


oe om Fm 


LAN: 00:28.00.D0 40808 +€ Qu MOM LEM: 
ELTE TE LEE ER aN: ZMwM1398 9 | Node B 


图 5-24 IPMI MACH dE AR A 


d) 如 果 待 安装 节点 中 包含 单 节点 复制 目标 集群 类 型 的 节点 ， 可 勾 选 “Backup Node” 复 选 框 ， 如 图 5-25 所 示 。 


LIGHT- 
HYPERVISOR BACKUP 
BLOCK ID POSITION IPMI MAC ADDRESS IPMI IP HYPERVISOR IP CVM IP COMPUTE 
HOSTNAME NODE 
NODE 
10.1.217.3 10.1.218.131 10.1.218.15 Set name rang [4 x 
Block-1 A 00:25:90:DD:E2:53 10.1.217.3 10.1.218.131 10.1.218.15 NTNX-Block-’ C) x 
B 00:25:90:DD:E2:54 10.1.217.3 10.1.218.132 10.1.218.15 NTNX-Block- O 
C 00:25:90:DD:E2:55 10.1.217.3 10.1.218.133 10.1.218.15 NTNX-Block-’ LJ 
D 00:25:90:DD:E2:56 10.1.217.3 10.1.218.134 10.1.218.15 NTNX-Block-’ eo 
Block-2 A 00:25:90:DD:E4:10 10.1.217.3 10.1.218.135 10.1.218.15 NTNX-Block-: x 


5-25 Ai “Backup Node" 以 配置 单 节点 复制 目标 集群 


e) 上 述 配置 信息 填写 完毕 之 后 ， 可 以 点 击 列表 右上 角 的 “Ping Scan” 以 测试 各 个 节点 的 IP 是 否 连通 。 如 待 安装 节点 一 行 最 后 字段 显示 “” 则 表示 响应 正常 ， 如 显示 “” 则 表示 对 应 节点 无 
响应 ， 网 络 存在 问题 。 


f) 点 击 屏幕 底部 “Next” 按 钮 ， 进 入 全 局 参数 配置 页 面 。 
4) 设置 全 局 参数 ， 在 “Global Config" 页 面 输入 IPMI、CVM 及 Hypervisor 的 网 络 信息 ， 如 网 络 掩 码 、 网 关 地 址 、DNS 服 务 器 地 址 等 ， 如 图 5-26 所 示 。 


a) 在 IPMI 网 络 信息 配置 部 分 ， 输 入 IPM|I 的 网 络 掩 码 “Netmask”、 网 关 地 址 “Gateway”、1PMI 登 录 账 号 “Username” RERE “Password” , 


Q.... IPMI 软 认 账 号 为 “ADMIN”， 默 认 密 码 为 “ADMIN”， 需 要 大 写 。 


b) 在 CVM 和 Hypervisor 网 络 信息 配置 部 分 ， 输 入 网 络 掩 码 “Netmask”、 网 关 地 址 “Gateway”、DNS 服 务 器 地 址 “DNS Server IP”， 并 在 “CVM Memory” 下 拉 菜 单 中 选择 CVM 的 
内 存 大 小 。 


aga 1. Node Config 2. Global Config 3. Node Imaging 4. Clusters Verify and Install 


Global Configuration 


Block Common Configuration 


IPMI CVM AND HYPERVISOR 
NETMASK 255.255.2550 NETMASK 255.255.2550 
GATEWAY: 10.5.501 GATEWAY: 10.5.511 
USERNAME ADMIN DNS SERVER IP 

(OPTIONAL): 88.8.8 
PASSWORD: | sss.. Show 

CVM MEMORY 

(OPTIONAL): 24 


Time Zone (optional) 


America/Chicago i 


Multi-Homing 


This allows you to multi-home the Foundation VM in each network used for imaging (IPMI, Hypervisor and CVM). This enables you to use your intended 
production network addresses for all components with only the use of flat switch 


IPMI IP CVM AND HYPERVISOR IP 
10.5.50120 10.5.51120 
< Prev Next » 


图 5-26 ”全 局 参数 配置 页 面 

@ CVM 内 存 字 段 初 始 设 为 “default (默认 值 取决 于 具体 的 节点 型 号 类 型 ) ， 你 也 可 通过 下 拉 菜 单 中 的 选项 来 指定 16GB、24GB、32GB 或 64GB 的 内 存 大 小 。 软 认 设 置 表示 针对 该 
型 号 类 型 的 建议 值 。 在 特定 情况 下 ， 可 分 配 大 于 默认 值 的 内 存 。 

c) 设置 集群 的 时 区 ， 通 过 “Time Zone” 下 拉 菜 单 选择 集群 所 在 时 区 ， 该 选项 为 可 选 配 置 项 。 

d) 如 果 之 前 步骤 中 所 配置 的 IP 地 址 均 位 于 同一 个 子 网 中 ， 或 IPMI、 虚 拟 化 Hypervisor 和 CVM IP 地 址 均 配 置 为 可 路 由 ， 那 么 无 须 勾 选 “Multi-Homing” 复 选 框 。 

e) 如 果 使 用 二 层 交换 机 来 安装 节点 ， 且 需要 访问 多 个 子 网 ， 请 勾 选 “Multi-Homing” 复 选 框 。 

i. 在 “IPMI 1P” 处 ， 输 入 一 个 IPMI 端 口 所 在 子 网 中 的 一 个 可 用 iP 地址 。 

i 在 “CVM and Hypervisor IP” 处 ,输入 一 个 CVM 和 Hypervisor 所 在 子 网 中 的 一 个 可 用 IP 地 址 。 

f) 完成 上 述 全 局 参数 填写 之 后 ， 点 击 “Next” 进 入 下 一 步 操作 。 

5) 配置 镜像 参数 ， 选 择 用 于 节点 安装 的 Nutanix AOS 安 装 文件 和 虚拟 化 Hypervisor 镜 像 。 


a) 如 果 你 所 选 的 待 安 装 节点 可 以 组 建 一 个 “多 Hypervisor 集 群 ”， 那 么 将 弹出 如 下 提示 窗口 ， 需 要 你 指定 要 创建 的 集群 类 型 。 如 所 选 的 待 安装 节点 无 法 创建 “多 Hypervisor 集 群 ”， 则 不 
会 出 现 该 提示 ， 安 装 流程 将 进入 默认 的 “Node Imaging” 页面 ， 如 图 5-27 所 示 。 


© Single Hypervisor 


Image all nodes using 4 single hypervisor typ 


Multi Hypervisor 


Select a combination of ESXi node 


You can select Acro 


Acropolis 


Installed Version AHV ESX HYPER-V CPS 


à. 72 


Available Packages Ay 


nutanix installer pa 

ckage-opt-euphrates 
-§.0-stable-b3d0ecO 
b/ba3eb86e2e/888 
4600ee0e /30ed/2e 
a.tar 


Refresh NOS 
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图 5-27 选择 集群 类 型 窗口 


b) 选择 “Multi Hypervisor” 之 后 ， 将 在 Hypervisor 选 择 窗口 出 现 如 图 5-28 所 示 的 “ESX+AHV” 选 项。 


Image Selection 


polis and Hypervisor ISO image 


Hypervisor 


ESX*AHV 


ailable Hypervisors 


VNiware-VMyvisor-Ins 
taller-5.5.0.updateQ3 
-3116895.x86_64.iso 


VMware-V Mvisor-Ins 
taller-5.5.0-1331820.x 
86_64.iso 


Refresh ISOs 


ee whitelist (20 Sep 2016) 


图 5-28 Hypervisor 选 择 窗 口 


c) 选择 “Single Hypervisor” 之 后 ， 安 装 流程 也 会 进入 默认 的 “Node Imaging” 页 面 ， 如 图 5-29 所 示 。 


as 1. Node Config 2. Global Config 3. Node Imaging 4. Clusters Verify and Install 


Image Selection 


You can select AOS and Hypervisor ISO images for your nodes 


AOS 


Installed Version: Unknown 


AVAILABLE PACKAGES # Manage 


nutanix installer package-release-euphrates-5 O 1-stable-fDbc717cfa35ac520e00b448... v 


Hypervisor 


HYPERVISOR TYPE 


ESX v 
AVAILABLE PACKAGES # Manage 
vmware esx 5.5.so = 
AVAILABLE AHV PACKAGES (STORAGE ONLY NODES) fF Manage 
AHV bundled with AOS (version 4.6+) " 


View whitelist (19 Jan 2017) 


< Prev Next » 


图 5-29 默认 的 “Node Imaging” Kw 
d) 选择 Nutanix AOS 镜 像 ， 在 下 拉 莱 单 中 选择 可 用 的 AOS 镜 像 ， 如 没有 要 安装 的 AOS 镜 像 ， 则 点 击 “Manage” 上 传 AOS 镜 像 。 


e) 选择 Hypervisor 镜 像 ， 通 过 下 拉 菜 单 选 择 Hypervisor 类 型 ， 然 后 选择 该 Hypervisor 可 用 的 镜像 。 


Qi 1. 在 “多 Hypervisor 集 群 ” 中 ， 选 定 的 ESXi 将 安装 在 计算 节点 上 ，AHV 将 安装 在 存储 节点 上 ， 且 无 法 选择 AHV 人 安装 包 。EFoundation 将 使 用 AOS 安 装 程序 中 的 AHV 安 装 包 。 
2. 若 安装 HyperV， 要 安装 的 节点 必须 配置 一 个 64 GB DOM， 且 支持 如 下 五 个 版 本 的 HyperV 英 文 版 : Free. Standard. Datacenter. Standard with GUI, Datacenter with GUI. 

3. 若 安装 的 AHV 版 本 不 同 于 Nutanix AOS 安 装 程序 中 的 版 本 ， 可 以 选择 上 传 新 的 AHV 镜 像 。 

4. 选 择 的 Hypervisor 镜 像 应 在 兼容 性 白 名 单 之 中 ， 可 以 通过 “Update the whitelist” 来 上 传 最 新 的 兼容 性 白 名 单 。 


f) 完成 上 述 所 有 设置 县 配置 无 误 后 ， 点 击 页 面 底部 右 侧 的 “Next” 进 入 配置 新 建 集群 参数 页 面 。 如 想 绕 过 集群 配置 直接 进入 节点 安 六 的 话 ， 可 以 点 击 页 面 顶 部 的 “Verify and Install" , 
页 面 将 直接 跳 转 到 安装 进度 监控 页 面 。 


6) 配置 集群 参数 ， 在 该 页 面 中 可 以 选择 创建 一 个 或 多 个 集群 ， 并 将 待 安装 的 节点 分 配 到 新 建 集群 中 ， 如 图 5-30 所 示 。 此 外 ， 还 可 以 勾 选 集群 创建 完成 之 后 启用 诊断 (NCC) 和 运行 状态 测 
试 (Diagnostics) 的 功能 。 
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Assign Nodes and Blocks to created clusters 
Cluster creation 


CLUSTER NAME EXTERNAL IP CVM DNS SERVERS CVM NTP SERVERS HYPERVISOR NTP SERVERS MAX REDUNDANCY FACTOR DEL 


my_cluster 10.5.51120 8.8.8.8 O.pool.ntp.org O.pool.ntp.org 2 = x 


Create New Cluster 


Post Image Testing 


Diagnostics NCC 
Assigned to my cluster (Based on the redundancy factor, select at least 3 nodes.) Select All ， Unselect All 
BLOCK AND NODES PMI MAC ADDRESS PMI IP HYPERVISOR IP CVM IP HOST NAME 
Block-1 
A 01:23:45:67:89:ab 10.5.50.56 10.5.5170 10.5.51.35 NTNX-Block-1-A 
B 01:23:45:67:89:cd 10.5.50.59 10.5.5173 10.5.51.38 NTNX-Block-1-B 
E 01:23:45:67:89:ef 10.5.5062 10.5.5176 10.5.51.41 NTNX-Block-1-C 
< Prev 


a) 点 击 页 面 顶 部 的 “Create New Cluster" ， 将 会 显示 一 个 针对 新 集群 的 空白 行 ， 在 对 应 的 字段 中 输入 如 下 信息 : 集群 名 称 、 集 群 虚拟 IP 地 址 、CVM 的 DNS 服 务 器 IP 地 址 、CVM 的 NTP 
服务 器 IP 地 址 、 虚 拟 化 Hypervisor NTP 服 务 器 地 址 以 及 集群 元 余 因 子 参 数 。 


Qs 1. “CVM DNS Servers” "CVM NTP Servers” fe “Hypervisor NTP Servers” 字 段 填写 时 ， 可 使 用 过 号 分 隔 列 表 ， 以 在 字段 中 指定 多 个 服务 器 地 址 。 
2. 针 对 Hyper-V 集 群 ，“External IP” 参数 是 必 填 项 ， 而 对 于 ESXi 和 AHV 集 群 是 可 选项 。 
3. 针 对 Hyper-V 集 群 ， 必 须 将 “CVM NTP Servers” 参 数 设置 为 活动 目录 域 控制 器 。 


4. 集 群 的 宛 余 因 子 上 默认 设 置 为 2， 表 示 数 据 共有 两 份 副本 ， 集 群 可 以 容忍 任何 一 个 节点 或 驱动 器 故障 ，RF 2 要 求 集群 至 少 有 3 个 节点 。 宛 余 因子 为 3 时 ， 表 示 数 据 将 在 集群 中 存储 三 份 副本 ， 且 
集群 可 以 容忍 位 于 不 同 区 块 中 的 任何 两 个 节点 或 驱动 器 故障 。 将 宛 余 因子 设置 为 3 要 求 集群 至 少 有 5 个 节点 ， 且 仅 在 创建 集群 时 启用 。 (同时 在 创建 存储 容器 时 必须 设置 宛 余 因子 为 3， 以 使 得 虚 


拟 机 (Guest VM) 的 数据 能 容忍 两 个 节点 的 故障 。) 


b) 如 果 创建 的 集群 是 单 节点 复制 目标 集群 ， 宛 余 因 子 只 能 配置 为 2， 你 只 需 输入 集群 的 名 称 ， 系 统 将 自动 添加 节点 信息 ， 如 图 5-31 所 示 。 


Assign Nodes and Blocks to created clusters 
Cluster creation 


CLUSTER NAME EXTERNAL IP CVM DONS SERVERS CVM NTP SERVERS HYPERVISOR NTP SERVERS MAX REDUNDANCY FACTOR DEL 


Backup 


Backup node is automatically added to à 


Create New Cluster 


Post Image Testing 


Diagnostics NCC 


Assigned to Backup 


BLOCK AND NODES IPMI MAC ADDRESS IPMI IP 


01:23:45:67:89:ab 1 10.0.0.20 NTNX-Block-1-A 


< Prev 


图 5-31 单 节点 复制 目标 集群 配置 页 面 


c) 勾 选 “Diagnostics” 或 “NCC” 复 选 框 ， 将 会 在 集群 创建 完成 之 后 运行 Nutanix Di-agnostics 性 能 测试 工具 或 Nutanix Cluster Check (NCC) 健康 状态 检查 工具 ， 并 将 日 志 输 出 到 各 
自 对 应 的 目录 ，“Diagnostics” 日 志 存 储 在 ~/foundation/logs/diagnostics，“NCC” 日 志 存 储 在 ~/foundation/logs/ncc。 


d) 将 待 安装 的 节点 分 配 到 新 建 集群 中 ， 在 “Block and Nodes” 字 段 中 选中 要 分 配 到 该 集群 中 的 所 有 节点 对 应 的 复 选 框 。 


OQ. 1. 待 安装 节点 可 以 分 配 到 任何 一 个 新 建 集 群 中 ， 但 无 法 将 一 个 节点 同时 分 配 到 多 个 集群 。 
2. 如 在 该 步 又 中 未 将 待 安装 节点 分 配给 新 建 集 群 ， 仍 可 以 在 节点 安装 之 后 ， 通 过 Prism 控 制 台 完 成 添加 节点 到 集群 的 操作 。 


e) 若 上 述 设置 均 正 确 ， 点 击 位 于 页 面 顶部 的 “Verify and Install” 按钮 以 启动 安装 进程 。 


7) 监控 安装 进程 ， 在 完成 所 有 全 局 、 节 点 及 集群 设置 之 后 ， 即 可 进入 安装 进程 。Foundation 首 先 会 配置 |PMI 端 口 ， 该 过 程 大 约 耗 时 数 分钟 ， 等 待 时 长 取决 于 集群 的 规模 。 


[人 > E + M ^ > = A ~ ~ ~ E ` 
O- 如 果 针 对 集群 中 的 一 个 或 多 个 节点 的 IPMI 端 口 配置 失败 ， 安 装 过 程 将 停止 ， 不 安装 任何 节点 。 等 待 端 口 配置 问题 纠正 之 后 ， 再 重启 安装 流程 。 


a) IPMI 端 口 寻 址 成 功 ，Foundation 将 进入 节点 安装 阶段 ， 并 显示 如 图 5-32 所 示 的 安装 进度 。 


[I 
== 


General Progress (46%) Installation in progress. tog. 


Installing 


Cluster Creation Status 


" 


STATUS CLUSTER NAME PROGRESS LOG 
mycluster Starting (O55) gH 
ea 区 Node Status 
STATUS IPMI IP PROGRESS LOG 
» 1014.83.24 Acquired Phoenix resource lock (4356) 
* 101.83.242 imaging (6755) 
- 104.83.243 phoenix complete [/335) 


b) RN RPA, BRITE, SHIRA mb "Log" HRB aM RAR. 


Qs Foundation 在 进行 节点 安装 时 ， 最 多 同步 处 理 20 个 节点 。 如 果 集群 包含 超过 20 个 节点 ， 则 总 处 理 时 间 将 随 着 每 20 个 节点 一 组 递增 45 分 钟 左 右 。 


c) 等 待 节点 安装 完成 之 后 ， 将 进入 集群 创建 环节 ， 该 环节 耗 时 较 短 ， 如 勾 选 了 “Dia-gnostics” 或 “NCC” 复 选 框 ， 则 会 需要 稍 长 时 间 。 期 间 你 可 以 点 击 “Log” 链接 查看 集群 创建 的 日 


pum 
/Po 


d) 成 功 完成 节点 安装 和 集群 创建 之 后 ， 将 显示 图 5-33 所 示 的 页 面 ， 表 示 和 集群 中 所 有 节点 的 IPMl 配 置 ， 虚 拟 化 Hypervisor 和 Nutanix CVM 以 及 集群 创建 成 功 完 成 。 


Back to config 


General Progress (100%) Installation Complete. Log 
Imaging done - 


Cluster Creation Status 


STATUS CLUSTER NAME PROGRESS LoG 


c landroverū4 Initializing cluster complete (100%) og 


Node Status 


STATUS IPMI IP PROGRESS LOG 
101.64102 last reboot complete (100%) og 
ec 101.64. 96 last reboot complete (100%) og 
101.54.99 last reboot complete (10095) Og 


图 5-33 ”集群 安装 完成 页 面 


e) 如 果 页 面 出 现 如 图 5-34 所 示 的 进度 条 变 红 ， 并 显示 “ 安 准 出 现 错误 ”消息 ， 且 一 个 或 多 个 节点 或 集群 条 目的 状态 列 显 示 红 色 的 X， 则 安 六 过 程 的 节点 安装 或 集群 创建 步骤 失败 。 你 可 点 
击 “Back to config” 按 钮 跳 转 回 配置 屏幕 ， 纠 正 任何 可 能 出 错 的 条 目 ， 以 重启 安装 流程 。 


Qs 默认 的 各 节点 安装 超时 时 限 为 30 分 钟 (ESXi) 或 60 分 钟 (Hyper-V4eAHV) ， 届 时 可 能 所 有 节点 〈 每 批 最 多 20 个 节点 ) 均 成 功 完 成 ， 也 可 能 会 提示 出 现 问题 。 


General Progress (83%) There were errors in the installation. 
Imaging done - Retry Imaging falled nodes with last config 


Cluster Creation Status 


STATUS CLUSTER NAME PROGRESS LOG 


mycluster fatal (10095) og 


Node Status 


STATUS IPMI IP PROGRESS LOG 
101.22729 Imaging complete (100%) log 
101.227 30 Imaging complete (100%) log 


ea 
Wa 


=e E 101.22731 fatal (33%) 


图 5-34 集群 安装 报错 页 面 


8) 使 用 Foundation Standalone 虚 拟 机 完成 一 个 新 建 集群 的 安装 之 后 ， 可 以 使 用 同一 个 Foundation VM 来 创建 另 一 个 集群 ， 但 需 在 安装 前 删除 之 前 安装 所 留存 的 持久 性 信息 。 转 到 配置 页 
面 ， 然 后 从 页 面 右上 角 的 齿轮 图 标 下 拉 列 表 中 点 击 “Reset Configuration” 选 项 ， 如 图 5-35 所 示 。 点 击 该 按钮 将 重新 初始 化 进度 监控 、 清 除 持久 性 配置 数据 ， 并 将 Foundation 环 境 恢 复 为 全 新 


mM i Global Config 


Global Configuration 


Block common Configuration 


图 5-35 Foundation Standalone # FALE FAC A veg 


5.1.2.3. BRS tl E SERES 


Nutanix 提 供 了 一 种 经 济 高 效 的 单 节点 数据 复制 备份 方案 ， 即 针对 运行 了 ESXi、Hyper-V 或 AHV 的 主 集群 可 以 创建 一 个 基于 AHV 的 单 节 点 复制 目标 集群 ， 为 主 集群 提供 数据 复制 及 备份 功 


amp 
GG 
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本 节 将 介绍 如 何 配置 单 节点 复制 目标 集群 和 主 集群 ， 以 及 如 何 将 节点 配置 到 集群 。 本 节 所 使 用 的 工具 是 基于 CVM 的 Foundation 来 发 现 同 一 子 网 中 的 工厂 预 装 节点 ， 并 将 已 发 现 节 点 添加 到 
新 建 集群 中 。 

Qi. 1. 主 集群 和 单 节点 复制 目标 集群 处 于 同一 广播 域 或 VLAN 中 ， 主 集群 支持 运行 ESXi、Hyper-V 或 AHV 作 为 Hypervisor， 单 节点 复制 目标 集群 仅 支持 AHV。 

2. 可 以 与 主 集群 一 起 创建 单 节点 复制 目标 集群 ， 也 可 以 独立 创建 单 节点 复制 目标 集群 ， 然 后 在 Prism 控 制 台 的 数据 保护 选项 卡 中 ， 将 单 节点 复制 目标 集群 添加 为 主 集群 的 远程 站 点 。 

3. 单 节点 复制 目标 集群 的 宛 余 因子 只 能 配置 为 >。 不过， 可 以 将 主 集群 的 宛 余 因子 配置 为 2 或 3。 

要 安装 节点 并 创建 集群 ， 请 执行 以 下 操作 : 


1) 参考 5.1.2.1 节 中 “发 现 节 点 ”和 “启动 Foundation” 步 骤 ， 下 载 安 装 所 需 文件 ， 启 动 Foundation， 选 择 好 主 集群 节点 和 单 节点 复制 目标 集群 的 节点 ， 并 配置 宛 余 因 子 ， 如 图 5-36 所 


2) 参考 5.1.2.1 节 “定义 集群 ”步骤 中 的 内 容 设 定 集群 参数 ， 如 指定 CVM、 虚拟 化 软件 和 1IPMI 全 局 网 络 地 址 (可 选 ) 以 及 集群 创建 后 启用 运行 状况 测试 (可 选 ) 。 用 于 同步 创建 主 集群 和 单 
节点 复制 目标 集群 的 步骤 如 下 : 


a) Œ "Primary Cluster Name” 和 “Backup Cluster Name” 文 本 框 中 输入 主 集群 和 复制 目标 集群 的 名 称 。 


© 1.Discover Nodes 2 Define Cluster 3.Setup Node 4.Selectimages 5. Create Cluster 


Discover Blocks and nodes. 
Discovered Ti new nodes. You have selected 4 nodes. Your Redundancy Factor Is set to (2). 


Missing nodes? Rerun discovery. 


Select AB - DeselectAll - Change RF (2) Show only new nodes 


1 backup node discovered 


Primary and the one-node backup cluster can be created in parallel by selecting the backup node along with the primary cluster nodes. 


O 


EAS FAS tl 
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图 5-36 ”Foundation 发 现 主 集群 及 单 节 点 复制 目标 集群 节点 页 面 


b) 为 主 集群 和 复制 目标 集群 输入 虚拟 IP 地 址 ， 该 信息 为 选 十 项 。 


c) Œ "Backup Configuration” FSH (如 果 未 取消 选择 "Remote Site Names Same As the Cluster Names” &ifE) ， 主 集群 和 复制 目标 集群 将 在 集群 创建 过 程 完成 后 互相 设 为 远 
程 站 点 。 此 选项 默认 为 已 选 。 不 过 ， 可 取消 选择 该 复 选 框 ， 并 在 相应 文本 框 中 分 别提 供 主 集群 和 复制 目标 集群 的 远程 站 点 名 称 。 


d) 完成 “定义 集群 ”中 余下 的 步骤 ， 如 图 5-37 所 示 。 

3) 参考 5.1.2.1 节 “ 安 六 节点 ”步骤 中 的 内 容 配 置 已 发 现 的 节点 。 用 于 同步 创建 主 集群 和 单 节点 复制 目标 集群 的 步骤 如 下 : 

a) 在 相应 字段 中 输入 主 集群 和 单 节操 复制 目标 集群 的 虚拟 化 软件 主机 名 称 、CVM 地 址 和 虚拟 化 软件 管理 地 址 。 

b) 执行 “安装 节点 ”中 余下 的 步骤 ， 如 图 5-38 所 示 。 

4) 参考 5.1.2.1 节 “选择 镜像 ”步骤 中 的 内 容 选择 要 使 用 的 AOS 和 虚拟 化 软件 镜像 ， 对 于 单 节点 复制 目标 集群 ,无须 导 入 该 镜像 ， 因 为 AHV 镜 像 与 AOS 版 本 打包 在 一 起 ， 如 图 5-39 所 示 。 


5) 启动 集群 创建 程序 ， 并 监控 主 集 群 和 单 节点 复制 目标 集群 安 六 节点 的 进度 ， 如 图 5-40 所 示 。 


D 1. Discover Nodes 2. Define Cluster 3. Setup Node 4. Select images 5. Create Cluster 


New Cluster Setup 
Set up general information to create and connect your cluster to the network. 


Cluster Information 
Set up cluster level information like cluster name and IP address. 


PRIMARY CLUSTER NAME BACKUP CLUSTER NAME -H t3 $ 
主 集群 名 ER | test. primary | | test backup EATS ms | 

IP ADDRESS (OPTIONAL) IP ADDRESS (OPTIONAL) EH 标 集 群 名 TR 

| | | 


(J ENABLE IPMI 


Backup Configuration 
Both clusters will be setup as remote sites for each other after cluster creation. 


REMOTE SITE NAMES SAME AS THE CLUSTER NAMES 


DNS and NTP 


NTP SERVER ADDRESS (OPTIONAL) 


DNS SERVER IP (OPTIONAL) 


Network Information 


This is some basic information about your Hypervisor, CVM, IPMI IPs. 


CVM Hypervisor 


NETMASK: NETMASK: 


255.255.240.0 255.255.240.0 


GATEWAY: GATEWAY: 


10.5.961 | 10.5.9641 


MEMORY: DNS SERVER IP: 


Default 10.4.815 


Post Imaging Tests 


This enables a series of tests to ensure that the cluster has been correctly configured and everything is running smoothly 


(C) ENABLE TESTING 


图 5-37 Foundation X 3L E 2E Jt vg 


e 


1. Discover Nodes 


2. Define Cluster 


主 集群 节点 信息 


复制 目标 


集群 节点 信息 


1. Discover Nodes 


2. Define Cluster 


3. Setup Node 


3. Setup Node 


4. Select Images 


Primary Cluster: Hostnames and IP Range 
Specify the IP Range for the Nodes. 


Hypervisor Hostname 
ENTER HOSTNAME 


test-AHV 


Manual Input 
Manually fill in the IP Range for the Nodes. 


HYPERVISOR HOSTNAME 


5. Create Cluster 


| test-AHV-1 


| tes-AHV-2 


| tes-AHV-3 


Backup Cluster: Hostname and IP 


HYPERVISOR HOSTNAME 


test-backup-AHV 


图 5-38 ”Foundation 单 节点 复制 目标 集群 安装 


4. Select Images 


Primary Cluster 


Acropolis 


Installed Version 
50 


Uploaded 
No Acropolis image 
uploaded. 


Upload Tarball 


Backup Cluster 


Acropolis: Same as Primary Cluster 
Hypervisor: AHV (Bundled with AOS) 


< Prev 


Node Setup 


Set up the IP addresses of your nodes. 


CVM IP 
FROM / TO 


10.5.96 .211 


10.5.96.213 


CVM IP 


10.5.96.211 


10.5.96.212 


| 10.5.96.213 


CVM IP 


| 10.5.96.204 


5. Create Cluster 


3f 
ie 
= 
B 


Image Uploads 


You can select Acropolis and Hypervisor ISO Images for your nodes 


Hypervisor 


AHV ESX HYPER-V CPS 


Available hypervisors 


Upload ISO 


See whitelist (10/25/2016) 


图 5-39 Foundation 单 节点 复制 目标 集群 选择 镜像 页 面 


Clear IPs and Hostnames 


Hypervisor IP 
FROM /TO 


10.5.96.207 


10.5.96.209 


HYPERVISOR IP 


10.5.96.207 


10.5.96.208 


10.5.96.209 


HYPERVISOR IP 


10.5.96.203 


Validate Network > 


an à 


& 1. Discover Nodes 2. Define Cluster 3. Setup Node 4. Select Images 5. Create Cluster 


Showing Cluster creation progress 


Overall Progress (7276) Log 


Cluster Creation Status 


STATUS CLUSTER NAME PROGRESS LOG 


scprimary Initializing cluster (4%) log 
Node Status 
STATUS HYPERVISOR IP PROGRESS LOG 
101.83.245 All operations completed successfully (100%) log 
101.83.246 All operations completed successfully (100%) log 
) 101.83.247 All operations completed successfully (50%) log 
10.1.83.248 All operations completed successfully (100%) log 


图 5-40 ”Foundation 单 节点 复制 目标 集群 创建 页 面 


6) 在 成 功 创建 集群 后 ， 可 以 登录 Prism 控 制 台 进行 集群 信息 的 配置 。 


5.2 ”性 能 测试 


5.2.1 测试 工具 介绍 


5.2.1.1 lOmeter4T£8 


IOmeter 是 Intel 开 发 的 一 款 开源 工具 ， 最 早 由 Intel 公 司 在 1998 年 的 英特尔 开发 者 论坛 (IDE) 发 布 ， 主 要 用 于 Windows 和 Linux 平 台 下 对 单机 或 者 集群 的 磁盘 I/O 子 系统 和 网 络 MO 做 性 能 测 
试 。IOmeter 是 存储 性 能 测试 领域 使 用 最 为 广泛 的 工具 之 一 。 


你 可 访问 如 下 链接 获得 1Ometer 的 文档 及 安装 介质 : 

: IOmetet 官 方 网 站 : http://www.iometer.org/ 

.IOmetet 开 源 项 目 站 点 : http://sourceforge.net/projects/iometer/ 

IOmeter 分 为 控制 台 IOmeter 和 客户 端 Dynamo， 其 中 控制 台 需 运行 在 Windows 平 台 ， 而 客户 端 Dynamo 可 以 运行 在 Windows 和 Linux 平 台 。 

在 执行 操作 时 ， 先 启动 控制 台 ， 然 后 在 客户 端 执行 Dynamo 命 令 ， 连 接 到 控制 台 ， 连 接 成 功 之 后 ， 在 控制 台 可 以 看 到 客户 端的 磁盘 设备 及 文件 系统 设备 ， 然 后 针对 客户 端 配 置 测试 策略 对 客 
户 端 设备 进行 测试 ， 测 试 负载 将 在 客户 端 运 行 。 
5.2.1.2 ”Diagnostics 介 绍 


Nutanix 提 供 了 一 款 名 为 “Diagnostics” 的 性 能 诊断 工具 ， 可 以 满足 Nutanix 用 户 或 合作 伙伴 用 于 Nutanix 集 群 的 性 能 测试 。 该 工具 可 以 在 使 用 Foundation 部 署 Nutanix 集 群 时 执行 ， 在 集 
群 安装 完毕 后 会 自动 运行 并 导出 性 能 测试 结果 。 也 可 以 在 集群 部 署 完毕 之 后 通过 命令 行 方式 启动 ， 对 集群 进行 性 能 测试 。 


启动 “Diagnostics” 工 具 之 后 ， 系 统 将 自动 在 Nutanix 集 群 中 的 每 个 节点 上 创建 一 个 测试 虚拟 机 ， 这 些 虚 拟 机 将 对 集群 中 的 节点 进行 性 能 测试 ， 并 将 测试 结果 返回 到 “Diagnostics”。 
测试 结果 将 包含 如 下 数据 : 

顺序 写 带宽 (Sequential write bandwidth) 

顺序 读 带 宽 (Sequential read bandwidth) 


随机 读 IOPS (Random read IOPS) 


- 随机 写 IOPS (Random write IOPS) 


5.2 ”性 能 测试 


5.2.1 测试 工具 介绍 


5.2.1.1 IOmeter 介 绍 


IOmeter 是 Intel 开 发 的 一 款 开源 工具 ， 最 早 由 Intel 公 司 在 1998 年 的 英特尔 开发 者 论坛 (IDF) 发 布 ， 主 要 用 于 Windows 和 Linux 平 台 下 对 单机 或 者 集群 的 磁盘 I/O 子 系统 和 了 网络/O 做 性 能 测 
试 。IOmeter 是 存储 性 能 测试 领域 使 用 最 为 广泛 的 工具 之 一 。 


你 可 访问 如 下 链接 获得 |Ometer 的 文档 及 安装 介质 : 

: IOmetet 官 方 网 站 : http://www.iometer.org/ 

: IJOmeter 开 源 项 目 站 点 : http://sourceforge.net/projects/iometer/ 

IOmeter 分 为 控制 台 IOmeter 和 客户 端 Dynamo， 其 中 控制 台 需 运行 在 Windows 平 台 ， 而 客户 端 Dynamo 可 以 运行 在 Windows 和 Linux 平 台 。 

在 执行 操作 时 ， 先 启动 控制 台 ， 然 后 在 客户 端 执行 Dynamo 命 令 ， 连 接 到 控制 台 ， 连 接 成 功 之 后 ， 在 控制 台 可 以 看 到 客户 端的 磁盘 设备 及 文件 系统 设备 ， 然 后 针对 客户 端 配 置 测试 策略 对 客 
户 端 设备 进行 测试 ， 测 试 负载 将 在 客户 端 运行 。 
5.2.1.2 ”Diagnostics 介 绍 


Nutanix 提 供 了 一 款 名 为 “Diagnostics” 的 性 能 诊断 工具 ， 可 以 满足 Nutanix 用 户 或 合作 伙伴 用 于 Nutanix 集 群 的 性 能 测试 。 该 工具 可 以 在 使 用 Foundation 部 署 Nutanix 集 群 时 执行 ， 在 集 
群 安装 完毕 后 会 自动 运行 并 导出 性 能 测试 结果 。 也 可 以 在 集群 部 署 完毕 之 后 通过 命令 行 方式 启动 ， 对 集群 进行 性 能 测试 。 


启动 “Diagnostics” 工 具 之 后 ， 系 统 将 自动 在 Nutanix 集 群 中 的 每 个 节点 上 创建 一 个 测试 虚拟 机 ， 这 些 虚 拟 机 将 对 集群 中 的 节点 进行 性 能 测试 ， 并 将 测试 结果 返回 到 “Diagnostics”。 
测试 结果 将 包含 如 下 数据 : 

- 顺序 写 带 宽 (Sequential write bandwidth) 

- 顺序 读 带 宽 (Sequential read bandwidth) 

- 随机 读 IOPS (Random read IOPS) 


- 随机 写 IOPS (Random write IOPS) 


5.2.2 ”测试 工具 使 用 


5.2.2.1 lOmeter 
IOmeter 作 为 一 款 存储 性 能 测试 工具 ， 应 用 范围 比较 广泛 。 但 测试 方法 和 测试 策略 设置 不 一 致 ， 往 往 也 会 导致 测试 结果 的 大 相 径 庭 。 本 节 将 对 实际 操作 及 测试 建议 作 详 细 曾 述 。 
IOmeter 的 使 用 步骤 如 下 : 
1) 下 载 并 安装 IOmeter。 


a) 建议 到 IOmeter 项 目 站 点 下 载 对 应 的 IOmeter 安 装 文件 ， 如 图 5-41 所 示 。 


Home! Browse / System Administration / Benchmark / lometer / Files 


lometer 


Brought to you by: allenwa, cheungming, vedrand, xca1019 


[e 


Summary 


Files Reviews Support Miailing Lists Tickets * News Donate 区 


Looking for the latest version? Download itometer-1.1.0-win32.1386-setup.exe (4.2 MB) 


Modified * Size Downloads / Week * 
* Parent folder 
iometer-1.1.0-WinXP.1386-bin.zip 2014-12-17 — 5.4 MB 9| 
iometer-1.1.0-docs.zip 2014-06-01 3.2 ME Ad | __ 
iometer-1.1.0-src.tar bz2 2014-06-07 674.7 kB dAl 
4 2 MB 642 B 
iometer-1.1.0-linux.i386-bin tar.bz2 2014-05-31 62.8 kB 37 | __ 
iometer-1.1.0-linux.x86. 64-bin.tarbz2 — 2014-05-31 55.4 kB 204 |a 
lometer-1.1.0-win-symbots.zip 2014-05-37 46.9 MB 1l. 
iometer-1.1.0-win64.ia64-bin.zip 2014-05-31 — 2.2 MB 142 |. 
iometer-1.1.0-vin64.x86 64-bin.zip 2014-05-31 3.7 MB 1.271 hd 
iometer-1.1.0-win32 (386-bin.zip 2014-05-31 — 28MB ST |... 
Totals: 10 Items 59.1 MB 2,478 


图 5-41 IOmeter T Zu X H 


b) 下 载 完 毕 之 后 ， 双 击 |Ometer 安 六 文件 ， 如 图 5-42 所 示 。 本 书 以 Windows 平 台 为 例 演示 IOmeter 的 安装 。 


应 用 程序 


[Pel iometer-1.1.0-win32.1386-setup 


201775723 22:31 


SWN 


4,105 KB 


图 5-42 IOmeter 安 装 文件 
c) 按照 安装 向 导 ， 完 成 IOmeter 安 装 ， 如 图 5-43 所 示 。 
2) 运行 IOmeter 控 制 台 ， 添 加 Dynamo 客 户 端 。 
a) 双击 IOmeter， 打 开 IOmeter 控 制 台 ， 如 图 5-44 所 示 。 
， 如 图 5-45 所 示 。 


b) 添加 Dynamo 客 户 端 ， 登 录 测 试 客户 端 ， 运 行 Dynamo 命 令 行 添加 测试 客户 端 


>cd /iometer-installation-path 
>Dynamo -i iometer-console-ip -m Dynamo-client-ip 


Welcome to the lometer 1.1 Setup 
Wizard 


License Agreement 
Please review the license terms before installing Iometer 1.1. 


This wizard will guide you through the installation of Iometer Press Page Down to see the rest of the agreement. 


1.1. 


It is recommended that you close all other applications 
before starting Setup. This will make it possible to update 
relevant system files without having to reboot your 
computer. 


Click Next to continue. 


Choose Components 
Choose which features of Iometer 1.1 you want to install. 


Check the components you want to install and uncheck the components you don't want to 
install. Click Next to continue. 


Select components to install: [v] Components 
Binaries (required) 
—[v] Users Guide 
ZI Import Wizard For MS A 
-[v] Start Menu Shortcuts 


Description 


Space required: 7.9MB 


library. If this is what you want to do, use the GNU Library General — 
Public License instead of this License. 


##### END 
CEEE E EEEE EEE EEE EEEE EEE EEEE EE KFS HFSS EEEE EEEE EEE SSS HHS SH 
DEEE EEEE EEEE EEE E 


If you accept the terms of the agreement, click I Agree to continue. You must accept the 
agreement to install Iometer 1.1. 


Choose Install Location 
Choose the folder in which to install Iometer 1.1. 


Setup will install Iometer 1.1 in the Following folder. To install in a different Folder, click Browse 
and select another folder. Click Install to start the installation. 


Destination Folder 


C:\Program Files (x86)Iometer .org|ometer 1.1] 


Space required: 7.9MB 
Space available: 39.6GB 


Completing the lometer 1.1 Setup 
Wizard 


Iometer 1.1 has been installed on your computer. 


Click Finish to close this wizard. 


< Back 
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Disk Targets | Network Targets | A Specificati Results Display | Test Set — 
g etwor argets ccess peci ICations esults isp ay e etup 测试 策略 面板 


Targets 


Maximum Disk Size 


[ Sectors 


Starting Disk Sector 
fo 


# of Outstanding I/Os 


i per target 


Use Fixed Seed 


E | Fixed Seed 


Test Connection Rate 


E | | Transactions per 


Write IO Data Pattern 


[Repeating bytes "| 


图 5-44 IOmeter 控 制 台 界面 


ES 管理 品 : C\Windows\system32\cmd.exe - Dynamo -i 10.132.130.60 -m 10.132.130.1 -|2 


icrosoft Windows [AR Æ. 6.3.96001 " 
cc? 26013 Microsoft Corporation. TR ES PAA]. 


:*sers fdministratorz2cd z "Program Files ¢x#6>"/lometer.org/Iometer 1.1 


Program Files (x#6>\lometer.org*lometer 1.12Dunamo -i 186.132.138.668 -m 1H.132.13H.172 
Dynamo version 1.1.86, i386, built May 28 2H14 18:17:44 


umber of processors: 2 
Using performance counter frequency: i1HMHz. 
umber of processors: 2 
Using performance counter frequency: 1BHHz. 


ommand line parameters»: 
Looking for Iometer on '1H.132.13H.6HBH" 
fending login request... 
I OMETER-ULHZ 
146.132.138.192 port 54188? 
Successful PortTGCP::Gonnect 
一 port name: 1H.132.13H.6H 


If dynamo and iometer hangs here. please make sure 
YOU USE a correct -m £manager computer name» that 
can ping from iometer machine. use IP if need. 
Login accepted. 
findows NI version: 6.2 
Reporting volume information... 
Found: 4 
Reporting raw disk information... 
Physical disk ''««.*PHYSICHLDRIUEH' contains partition information. 
se ——flagy FORCE_RAW option to display. 
Physical disk '«*«.*-PHYSICHLDRIUE1' contains partition information. 
se ——f lag FORCE_RAW option to display. 
Physical disk '««.*-PHYSICHLDRIUEZ' contains partition information. 
se ——flagy FORCE_RAW option to display. 
Failed opening device **."-PHYSICHLDRIUE3. 
Found: H 
Reporting network share information... 
Found: H 
Reporting ICP network information... 
done. 


图 5-45 ”使 用 Dynamo 添 加 客户 端 界 面 
3) 配置 Worker 及 访问 规范 。 


a) 按照 上 述 方式 ， 依 次 添加 Dynamo 客 户 端 ， 全 部 添加 完成 之 后 ， 使 用 Ometer 控 制 台 为 所 有 的 客户 端 配置 Worker， 点 击 三 图 标 添加 Disk Target 测 试 磁盘 性 能 ， 点 击 襄 图标 添 加 
Network Target 测 试 网 络 性 能 。 其 中 ， 黄 色 磁 盘 图 标 表 示 已 挂 载 的 逻辑 驱动 器 ， 带 有 红色 和 斜 杠 的 黄色 磁盘 图 标 表 示 该 逻辑 驱动 器 在 测试 开始 之 前 ， 需 要 先 写 入 iobw.tst 以 准备 测试 环境 。 赣 色 磁 
盘 图 标 表 示 物 理 驱 动 器 ， 该 类 型 驱动 器 没有 任何 逻辑 分 区 。 通 过 单 击 选中 其 中 一 个 或 者 按 住 键盘 shift 键 来 选中 多 个 驱动 器 添加 选中 的 Manager 的 Worker， 如 图 5-46 所 示 。 


注意 1. 客户 端 显示 的 Worker 的 数量 取决 于 客户 端 所 配置 的 CPU 核心 数 ， 你 可 以 通过 操作 菜单 来 增加 或 删除 Worker。 
2. 在 实际 测试 存储 性 能 时 ， 推 荐 使 用 物理 驱动 器 作为 Worker 的 Disk Target， 这 样 能 更 准确 地 反映 存储 实际 性 能 ， 其 不 会 受到 系统 缓存 或 人 为 因素 干扰 导致 测试 结果 不 准确 。 


3. “Disk Targets " way “Write IO Data Pattertn ”选项 是 指 测 试 数据 生成 模式 ， 下 拉 菜 单 中 有 三 种 可 选 模式 : IO 数据 是 重复 的 Repeating Bytes; 每 次 写 入 IO 均 使 用 全 新 随机 数据 的 Peseudo 


Random; 使 用 一 套 16MB 随 机 数据 模型 的 Full Random. 


e| *|e|$| ^| i| M] ?| 


Topology Disk Targets | Network Targets | Access Specifications | Results Display | Test Setup 


Targets 


- B lOMETER-WLO1 ET Maximum Disk Size 
Worker 1 De c 


要 p d Volume{2cSd0bdb-Odde-11e7-8C f TE 
B. E IOMETER-WwLO2 rig D: "Arhi" 


号 Worker 1 c3 E: "Are" 
^ Starting Disk Sector 
g Z3 3: "INL TANIX VDISK 0" 


OG 4: "NUTANS VDISK 0" [ 


# of Outstanding IOs 
i per target 


Use Fixed Seed 


E | Fixed Seed 


Test Connection Rate 


E | 一 Transactions per 


Write IO Data Pattern 


Repeating bytes "| 


图 5-46 Ba € Worker XE dg 


b) 为 Worker 配 置 测 试 访问 规范 (Access Specification) ， 可 以 选择 为 所 有 Worker 配 置 一 样 的 访问 规范 ， 也 可 以 单独 为 Worker 配 置 特定 的 访问 规范 。lOmeter 默 认 提 供 了 一 些 典 型 的 访 
问 规范 ， 可 以 直接 选中 一 个 或 多 个 ( 按 Shift 键 复 选 ) 访问 规范 分 配给 对 应 的 Worker， 如 图 5-47 所 示 。 


Disk Targets | Network Targets Access Specifications | Results Display | Test Setup 


Assigned Access Specifications Global Access Specifications 


4 KIB: 100596 Read: 0% random 22512 B: 25% Read: 0% random. ^ 
(io KiB: 100% Read: 0% randam 22512 B: 0% Read: 0% random 
m E IDMETER-wLD2 @ 32 KiB; 100% Read; 0% random Be 4 KiB; 100% Read; 0% randon Edit 
a Warker 1 35:54 KiB: 7596 Read: 096 random i 
554 KIB; 50% Read; 096 random EE 
5:4 KIB: 2596 Read: 0% random! - 
5,24 KIB: 096 Read: 096 random Delete | 
3,54 KiB aligned: 100% Read: 10 
284 KiB aligned; 5096 Read; 100 
S54 KIB aligned: 0% Read: 100% 
3616 KIB: 100% Read: 0% rande 
2216 KiB: 7596 Read; 0% randor 
5,516 KiB; 50% Read; 0% randor 
2216 KiB: 2596 Read; 0% randor 
[216 KiB: 096 Read: 0% random 
BE 32 KiB: 1009 Read; 0% rande 
28 32 KIB: 7596 Read: 0% randor 
2232 KIB: 50% Read: 0% randor 
5:5 32 KIB: 2596 Read: 0% randor 
1 32 KiB: 096 Read: 0% random 
354 KIB 100% Read: 0% rande 


m Ae A Liv HB ari" iit andar Y 
Moye Up | Wove Down od Kihe SG He ani UGE 


32 KiB: 100% Read: 095 random 


图 5-47 配置 Access Specifications j t 


4) 选 定好 访问 规范 之 后 可 以 点 击 ^ 图 标 直 接 开始 测试 ， 控 制 台 会 弹出 “Save Result” 对 话 框 ， 选 择 测试 结果 存放 路 径 ， 并 定义 测试 结果 名 称 ， 点 击 “Save” 后， 控制 台 开 始 测试 ， 并 自动 
跳 转 到 测试 结果 页 面 。 你 可 以 在 “Update Frequency (seconds) ”下 拉 菜 单 中 选择 测试 结果 更 新 的 频率 ， 当 前 访问 规范 下 的 测试 结果 会 显示 在 如 图 5-48 所 示 的 测试 结果 显示 界面 中 。 


a) 当 为 Worker 选 定 了 多 个 访问 规范 时 ， 可 以 在 开始 测试 后 用 手动 方式 依次 运行 选 定 的 访问 规范 ， 点 击 @ 图 标 停止 当前 运行 的 访问 规范 ， 启 动 下 一 个 访问 规范 的 测试 ， 选 择 “Access 
Specifications” 选 项 卡 ， 可 以 在 “Assigned Access Specifications” 中 看 到 如 图 5-49 所 示 的 访问 规范 ， 红 色 表 示 已 经 运行 完毕 ， 绿 色 表 示 正 在 运行 ， 蓝 色 表 示 等 待 运行 的 访问 规范 。 


b) 除了 可 以 手动 切换 不 同 访问 规范 测试 之 外 ， 还 可 以 通过 “Test Setup” 定 义 测 试 运行 策略 ， 在 “Test Setup” 选 项 卡 中 ， 可 以 定义 测试 名 称 、 每 个 访问 规范 的 运行 时 间 (Run Time) 、 
每 次 运行 启动 前 适应 时 间 (Ramp Up Time) ， 以 及 测试 循环 策略 (Cycling Options) 等 ， 例 如 ， 选 中 “Cycling Options" 下 拉 菜 单 中 的 “Cycle Workers--add step workers using all 
selected targets at a time" ， 则 意味 着 测试 运行 时 会 依次 增加 Worker， 以 逐步 增加 测试 负载 ， 如 图 5-50 所 示 。 点 击 生 图 标 直接 开始 自 定 义 测 试 ， 如 图 5-51 所 示 。 


Disk Targets | Network Targets | Access Specifications Results Display | Test Setup 


Results Since Update Frequency (seconds) 
te Start of Test 
(^ Last Update 


Drag managers and warkers Record last 
from the Topolagy window = [^ update results to 
to the progress bar af your file 


Display 
All Managers 4669.23 


All Managers 76.50 MBPS (72.96 MIBPS) 


Total MBs per Second (Decimal | 


All Managers 


Average I/O Response Time (ms) [| | 


All Managers 73.0203 


Maximum O Response Time (mà [| JA 


All Managers 3.04 % 


% CPU Utilization (total) | —— >| 


All Managers 


Total Error Count | | Jr 


图 5-48 测试 结果 显示 界面 


| Results Display | Test Setup 


Global Access Specifications 


4 KiB; 100% Read; 0% random 3i Idle ed 
(O16 KiB: 100% Read; 096 random 28 Default 


@ 32 KB: 100% Read: 096 random 5,5512 B; 100% Read: 0% rando Edit | 


22512 B: 7596 Read: 0% rando 

5,5512 B; 50% Read; 096 rando Seide 
5,5512 B: 2596 Read: 0% randorr 
22512 B: 0% Read: 0% random | 

284 KIB: 100% Read: 096 randor 

S24 KiB: 7596 Read: 096 random 

5:4 KIB: 5096 Read: 096 random! 

5:4 KiB: 2596 Read: 096 random! 

28d KIB: 096 Read: 096 random 

554 KiB aligned; 10096 Read; 10 

224 KiB aligned: 5096 Read; 100 

3:54 KIB aligned: 0% Read: 100% 

2216 KiB: 10096 Read; 0% rande 

2216 KiB: 7596 Read: 0% randor 

2216 KiB: 5096 Read: 0% randor 

2216 KiB: 2596 Read: 0% randor 

will KiB: 096 Read: 0% random 

3592 3X3 100% Read: 095 rande 


Lr x = ot ari" Y z nedar isi 
Move Up | Move Down | s 


B. s IDMETER-wL02 
号 Worker 1 


Remove => 


图 5-49 Assigned Access Specifications % 7 J 


Disk Targets | Network Targets | Access Specifications | Results Display Test Setup | 


Test 


INTNX-te st-01 


Ramp Up Time Number of Workers to Spawn Automatically 
Seconds Disk 
(* # of CPUs 


: | Recard Results 
B I IOMETER-WLO4 (C 国 


I Worker 1 All 
AS) Worker 2 


Cycling Options 


[Cycle Workers -- add step workers using all selected targets at a time. "| 


Workers # of Outstanding [/Os 


Start [ End [2 
Jower |2 
[Linear Stepping "| i i [Exponential Stepping "| 


图 5-50 Test Setup 设 置 界面 


NTNX-test-01 


$|*j3EW| * 


Disk Targets | Network Targets | Access Specifications Results Display | Test Setup | 


Update Frequency (seconds) 


Drag managers and workers Record last 
from the Topolagy window = [^ update results ta [ "| 
to the progress bar of your file 2) Last Update 


Display 
All Managers 2502.79 


Total I/Os per Second | aaa! H 


All Managers 10.25 MBPS (9.78 MIBPS) 


Total MBs per Second (Decimal) | LE H 


All Managers 1.5966 


Average IO Response Time (ms) eL H 


All Managers 37.4329 


Maximum I/O Response Time (md b — ] xr 


All Managers 3.35 96 


96 CPU Utilization (total) | m- 5 >| 


All Managers 


Total Error Count | | Ir 


T remaining: [202 SEC TT 1 af 6 


图 5-51 使 用 “TestSetup” 自 定义 测试 运行 界面 


5) 自 定义 访问 规范 ， 以 模拟 真实 环境 中 业务 运行 状态 。 选 择 “Access Specifications” 选 项 卡 ， 如 图 5-52 所 示 。 点 击 右 侧 的 “New” 按钮 ， 弹 出 “Edit Access Specifications" 窗口 。 


2 saae alele ajala] z 


Topology 


a IDMETER-wWLO4 


Lg Worker 1 
oo Worker 2 


| Results Display | Test Setup 

Global Access Specifications 

5;£ Idle pem 
22 Default P = 
5,5512 B; 100% Read; 096 rando Edit | 
28512 B: 7596 Read: 0% rando 

5,5512 B; 5096 Read; 096 rando Edi: ugs 
22512 B: 25% Read: 0% rando 
22512 B: 0% Read: 0% random 

284 KIB: 100% Read: 0% rando 

284 KIB: 75% Read: 0% random 

284 KIB: 50% Read: 096 random 

284 KIB: 25% Read: 0% random 

S84 KIB: 096 Read: 096 random 

284 KIB aligned: 100% Read: 10 

284 KiB aligned: 50% Read: 100 

224 KiB aligned: 0% Read; 100% 

2216 KIB: 10096 Read: 0% rande 

2216 KIB: 75% Read: 0% randor 

2216 KIB: 5096 Read: 0% randor 

2216 KIB: 2596 Read: 0% randor 

2516 KIB: 0% Read: 096 random 

3592 KIB; 100% Read: 0% rande 


m ÁOH d a^. part I ua andar = 
Maye Lp | wove Down i a a a a He 


图 5-52 新建 测 试 规范 


a) Œ “Edit Access specification” 窗 口中 自 定义 访问 规范 ， 它 显示 了 访问 规范 的 定义 并 且 人 允许 对 其 进行 修改 。 同 时 可 以 定义 该 访问 规范 默认 的 指派 对 象 。 每 个 访问 规范 可 以 包含 多 个 MO 
规范 ， 每 个 |/O 规 范 包含 了 Size、%Access、%Read、%Random、Delay、Burst、Alignment、Reply 字 段 ， 可 以 点 击 “Insert Before" ay "Insert After” 在 选中 的 MO 规范 前 面 或 后 面 增加 新 
的 I/O 规 范 ， 如 图 5-53 所 示 。 


b) 按照 目前 比较 常见 的 应 用 需求 和 业务 运行 模式 ， 建 议 采 用 如 图 ?-54 所 示 的 MO 规范 来 组 成 一 个 完整 的 访问 规 学 。 


6) 完成 自 定义 访问 规范 后 点 击 “OK” 保 存 ， 然 后 将 自 定义 的 访问 规范 分 配给 Worker 开 始 测试 ,或 者 在 开始 测试 之 前 ， 点 击 中 图 标 保存 当前 测试 配置 脚本 ntnx-test.icf 以 备 后 续 直 接 使 用 ， 
如 图 5-55 所 Zh. 


7) 选择 不 同 的 测试 结果 显示 方式 ， 在 “Results Display” 选 项 卡 中 ， 点 击 每 列 结果 显示 的 按钮 ， 弹 出 结果 类 型 列表 ， 可 以 选择 不 同类 型 的 结果 数据 。 也 可 以 点 击 每 列 最 后 的 :图 标 ， 如 图 5- 
56 所 示 ， 阐 出 仪表 盘 显示 结果 数据 ， 如 图 ?5-57 所 示 。 


Mame Default Assignment 
[NTN -test [None | 


X Access | X Read) XRandom | Delay | Burst Alignment 


Insert Before 
0MB zkB OB 100 Er 100 [] 1 0MB zkB UB 


Insert After 


Delete 


Transfer Request Size Percent of Access Specification Percent Read 'rite Distribution 


E = E = [o = 7 
rA 


Megabytes = Kilobytes Bytes 100 Percent Write 


Percent Handam/5 equential Distribution Burstiness Align “Os on 


f Request Size Boundaries 


[] Transfer Delay Burst Length 
nz 100% E TE 1 (Ae f Sector Boundaries 
Sequential Random ÜC [D E E E E = 


Megabytes Kilobytes Bytes 
Reply Size 


(* No Reply 
C E — E --| [o 一 | 
Megabytes Kilobytes Bytes Cancel | 


图 5-53 ”编辑 访问 规范 窗口 


Mame Default Assignment 
[NTN -test [Disk Workers | 


42 Access “Read x Handem, Dela 


1 MIB 
1 MIB 
0 MiB 
0 MiB 
0 MiB 
0 MiB 


0 KIB 
Ü KB 
4 KIB 
4 KIB 
4 KIB 
8 KIB 


0 
100 
100 

0 

a 
e 


100 
100 
100 
100 
100 
100 


Burst 
1 


Alianment 


| MIB 
| MIB 
0 MiB 
0 MiB 
0 MiB 
0 MiB 


0 KiB 
O KIB 
4 KIB 
4 KIB 
4 KIB 
8 KIB 


OB 
UB 
UB 
OB 
UB 
OB 


Insert Before 


Insert After 


Delete 


Percent Read./ rite Distribution 


OO Ey 


Percent of Access Specification 


#0 Percent 


Transfer Request Size 


E = [8 = [o = 


Megabytes Kilobytes Bytes 


Align [Ds on 
f Request Size Boundarie: 


Percent Handam/5 equential Distribution Burstiness 


[] Transfer Delay Burst Length 
D 1005: [ ms fi IDs 
Sequential Random 


Reply Size 
(* No Reply 


C fo = [E — 


Megabytes Kilobytes 


C Sector Boundaries 


cb HP mb z 


Megabytes Kilobytes Bytes 


Cancel | 


图 5-54 ”典型 的 访问 规范 


Ajeg] I 


Disk Targets | Network Targets Access Specifications | Results Display | Test Setup 


Global Access Specifications 

3: 4 KIB aligned: 5096 Read: 100 « New 
| $4 KIB aligned; 0% Read; 100% 
Li) IDMETER-wLO2 51616 KiB; 100% Read; 0% randa 
ZEE 2516 KIB: 7596 Read: 0% randor 
2216 KIB: 5036 Read: 0% randor 
2216 KiB: 25% Read: 0% randor 
5,5 16 KIB; 0% Read; 0% random pns 


: $E 32 KIB: 100% Read: 0% rande 
S-E IOMETER-WL04 218 32 KiB; 7536 Read; 0% randor 


Assigned Access Specifications 
NTNX-Disk-MWaorkers 


Edit Copy 


2832 KIB: 5096 Read: 096 rando 
zz Add . 
pc = 32 KIB: 2596 Read: 0% randa 


Li 


` 


L3 


32 KIB: 096 Read: 0% random 
b4 KIB: 10095 Read: 0% rand 

64 KIB: 5096 Read: 096 rando 
* 54 KIB: 096 Read: 095 random 
218 256 KiB: 10096 Read: 0% ran 

28256 KiB: 5096 Read: 0% rand 

22256 KiB: 096 Read: 0% rando 
3, Allin one 

= NTNX-Disk-Workers 

© NTNX-All-Workers 


Remove = . 


Ww w w 4 


t 


` 


w 


` 


^ W^ wh oh 


x 


w 


Move Up | Move Down | 


图 5-55 分配 自 定义 访问 规范 到 Worker 


CC el A FATE LL * 


Topology 


Disk Targets | Network Targets | Access Specifications Results Display | Test Setup | 


WG E EIE A Results Since Update Frequency (seconds) 
- V Drag managers and workers Record last G etol led 
from the Topology window — [^ update results to r 4 
T IDMETER-wLD? ta the progress bar of your file Last Update 
: H Worker 1 
j Display 
B. s JOMETER-WLOS | All Managers 8614.37 
| A worker 1 Total IOs per Second : 


É s s lOMETER-WLO4 | Operations per Second 
Lg Worker 1 
za Worker 2 


Managers 35.28 MBPS (33.65 MIBPS) 
Megabytes per second | 


Average Latency 
Maximum Latency Wlanagers 
CPU 


Network anagers 712.3757 


Errors 


All Managers 3.14 96 


96 CPU Utilization (total) | ERE H 


All Managers 


Total Error Count | | In 


| Run 1 af 1 


图 5-56” 自 定义 测试 结果 显示 类 型 


10 


Settings Test Controls 


Total lO per Second 
MSN [ie] e 


Range |l | Show Trace 


图 5-57 测试 结果 显示 仪表 总 


在 进行 一 个 标准 的 性 能 测试 时 ， 测 试 工 具 仪 仪 是 一 个 载体 ， 在 测试 之 前 需要 保证 有 统一 的 测试 基准 和 测试 标准 来 对 不 同 被 测 对 象 进行 统一 的 加 压 和 测试 ， 以 得 出 客观 公正 的 测试 结果 。 使 用 
IOmeter 对 超 融 合 系统 进行 测试 时 需要 统一 的 测试 策略 和 准则 ， 包 括 : 
` 一 定 不 要 格式 化 待 测试 的 磁盘 了 驱动器。 格式 化 后 的 逻辑 驱动 器 ， 其 文件 系统 将 会 使 用 系统 内 存 作 为 读 / 写 缓存 ， 而 无 法 真实 反映 存储 系统 的 性 能 ; 未 经 格式 化 的 磁盘 驱动 器 能 更 好 地 反映 
存储 系统 的 真实 性 能 。 
- 一 个 CPU 对 应 一 个 Wotrkeft， 一 个 Wotket 分 配 一 块 磁 瘟 了 驱动器。 在 Windows 平 台中 ， 为 了 更 好 地 协调 线程 和 磁盘 I/O ， 建 议 一 个 虚拟 机 对 应 一 个 Wotkef， 如 测试 集群 性 能 ， 可 以 使 用 多 个 虚拟 


机 ， 然 后 通过 脚本 的 方式 部 署 减少 配置 复杂 度 。 
. 一 定 不 要 使 用 Windows 系 统 盘 C 盘 作为 Disk Target. 


- 兼顾 I/O 性 能 与 时 延 ， 设 置 #of OutstandingI/OS 时 ， 建 议 设置 为 1 ， 以 保证 更 好 的 时 延 。 


5.2.2.2 Diagnostics 
Diagnostics 是 Nutanix 基 于 性 能 测试 工具 FIO 封 装 的 一 个 性 能 测试 工具 ， 用 以 协助 客户 测 坛 Nutanix 集 群 性 能 情况 ， 帮 助 用 户 对 集群 性 能 进行 优化 。 


除了 在 集群 部 署 时 可 以 使 用 Foundation 激 活 Diagnostics 之 外 ， 也 可 以 在 任 一 CVM 中 执行 Diagnostics 命 令 来 运行 该 测试 工具 ， 本 小 节 将 介绍 如 何 通过 命令 局 动 该 测试 工具 并 抓 取 测试 结 
果 。 


1) 通过 SSH 登 录 到 集群 任意 一 人 台 CVM。 


2) 运行 新 的 Diagnostics 测 试 之 前 ,使 用 如 下 命令 清空 之 前 的 测试 数据 ， 如 图 5-58 所 示 。 


$ ./diagnostics/diagnostics.py cleanup 


图 5-58 ”清空 Diagnostics 运 行 环境 
3) 开始 新 的 Diagnostics 测 试 ， 使 用 如 下 命令 行 启动 新 的 测试 ， 如 图 5-59 所 示 。 


$ ./diagnostics/diagnostics.py run 


图 5-59 ”启动 Diagnostics 


4) 查看 Diagnostics 测 试 结果 。Diagnostics 运 行 完 毕 会 在 SSH 会 话 中 直接 显示 如 图 5-60 所 示 的 结果 数据 。 


5) 如 想 获 取 详 细 的 测试 结果 ， 可 以 到 如 图 5-61 所 示 的 路 径 下 载 所 有 测试 数据 。 
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Diagnostics 运 行 结果 存放 
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图 6-1 ”Nutanix 对 虚拟 化 层 的 支持 


FAR VM Nutanix Controller VM 
(任何 节操 上 ) (第 节操 一 个 ) 


VM 


图 6-2 Nutanix CVM 示 意图 


Nutanix AOS (Acropolis OS, ABRZECVM#) 是 Nutanix 核 心软 件 ， 在 Nutanix 网 站 上 Compatibility Matrix (兼容 矩阵 ) 中 提供 了 每 个 AOS 版 本 可 支持 的 虚拟 化 系统 。 如 图 6-3 所 示 ， 
在 最 新 的 Nutanix 5.1.0.x 版 本 中 ， 支 持 以 下 的 虚拟 化 系统 。 读 者 可 以 通过 https://portal.nutanix.com/#/page/compatibilitymatrix 在 线 查 询 AOS 和 虚拟 化 系统 以 及 硬件 的 兼容 信息 、。 


y) Compatibility Matrix 


FILTER BY NX-3060-G5 vw 5.1.0.x Y HYPERVISOR vw FEATURE Vv 
^ MODEL v AOS (NOS) a HYPERVISOR 
NX-3060-G5 5.1.0.x AHV-20160925.44 
NX-3060-G5 51:0:x AHV-20160925.57 
NX-3060-G5 5.1.0.x ESXi 5.5 U3B 
NX-3060-G5 S10.x ESXi 6.0 U2 
NX-3060-G5 50x ESXi 6.0 U3 
NX-3060-G5 5.1.0.x ESXi 6.5 
NX-3060-G5 5 1.0.x Hyper-V Win Server 2012 R2 
NX-3060-G5 5.1.0.x XenServer 711 


图 6-3 Nutanix AOS # AE f 


i 通过 兼容 矩阵 可 以 了 解 多 个 节点 型 号 是 否 可 以 在 同一 个 集群 中 混合 使 用 的 信息 。 如 图 6-4 中 查询 的 NX-3060-G5 型 号 节点 ， 可 与 大 量 的 Nutanix 超 融合 型 号 在 同一 个 集群 中 混合 使 


y Compatibility Matrix 


4 MODEL * AOS (NOS) 4 HYPERVISOR 
NX- 

3060- 51.0.x ESXi 6.5 

G5 


6.1.1 虚拟 化 系统 的 选择 


FILTER BY HX-3060-G5 wr 510x Wr ESXi 6.5 Wwe «v Intermixing x 


INTERMIXING 


NX-1050 NX-10655 NX-1065-G4 NX-1065-G5 NX-10655-G5'^ NX-3050 NX-3051 NX-3060 NX-3061 NX 
NX-6035C NX-6035C-G5 NX-6050 NX-6060-E NX-6070 NX-6060 NX-6080 NX-6035-G5 NX-6155- 
(552.2.5,8.3 Mx. 7110 NX-3155G-G4 MX-3155G-G5 NX-8150 NX-8150-G4 NX-8150-G52-4 NX-8035-G4 NX- 


m EE T- 
conyam tes. 
aU35-G57 


图 6-4 NX-3060-G5 型 号 节点 


虚拟 化 系统 是 构建 超 融 合 系统 的 基础 ， 虽 然 各 个 Hypervisor 的 功能 已 经 趋 于 近似 ， 但 是 在 建设 超 融 合 系统 时 ， 用 户 仍然 需要 考量 计划 使 用 的 Hypervisor 是 否 可 以 满足 业务 和 技术 的 要 求 。 


一 般 来 说 ， 用 户 在 选择 虚拟 化 系统 时 主要 有 以 下 几 个 考虑 : 


- 采购 预算 是 否 允 许 在 新 建 超 融 合 项 目 时 额外 采购 Hypervisor? 


" 技术 人 员 的 能 力 是 否 可 以 完成 虚拟 化 系统 的 支持 ? 


` 使 用 的 操作 系统 是 否 有 特殊 要 求 ? (如 是 否 需 要 使 用 遗留 的 操作 系统 ? ) 


` 使 用 的 应 用 程序 对 虚拟 化 系统 是 否 有 特别 的 要 求 ? (如 使 用 VIMware Hotizon 运 行 VDI， 底 层 只 支持 vSphere。) 


` 是 否 有 一 些 关 键 特 性 必须 使 用 特定 的 Hypervisor? (如 计划 使 用 GPU 卡 、 需 要 实现 数据 中 心 的 灾 备 、 需 要 与 现 有 的 备份 软件 集成 等 。) 


Nutanix AHV 作 为 Nutanix 推 荐 的 Hypervisor， 已 经 包含 在 Nutanix 超 融合 系统 中 ， 表 6-1 总 结 了 常见 的 虚拟 化 特性 在 AHV 中 的 实现 方式 。 


虚拟 化 特性 

管理 服务 硕 

在 线 迁 移 (vMotion/Live Migration) 
高 可 用 (HA) 


数据 保护 
软件 定义 存储 集成 


Virtual Volume 
Hypervisor 动态 资源 调度 (DRS) 


ff fi DRS 
软件 更 新 管理 


存储 APU 阵列 集成 


表 6-1 AHV 虚 拟 化 特性 对 照 表 


AHV 实现 方式 

Prism Element (内 置 )，Prism Central (单独 部 署 ) 
内 置 

内 置 


( 续 ) 


-— 


本 地 快照 (Snapshot)、 快 照 计 划 任 务 (TimeStream)、 同 步 复制 、 异 步 复 制 
及 备份 到 公有 云 

分 布 式 文件 系统 架构 

MEM, AHV K DSF 集成 不 再 需要 这 个 为 解决 共 至 存储 管理 而 设计 的 特性 

支持 ，Acropolis 动态 调度 ( ADS/Acropolis Dynamic Scheduling) 功能 可 以 
实现 存储 和 计算 资源 的 日 动 平衡 

MEH, AHV 与 DSF 集成 通过 智能 数据 分 层 可 以 避免 热点 数据 产生 

支持 ， 提 供 软 件 、Hypervisor、 固 件 的 一 键 式 升 级 

不 适用 , AHV 与 DSF 425K, Hypervisor 发 起 的 存储 功能 (如 快照 、 克 隆 等 ) 
目 动 凶 载 到 存储 层 执 行 


相 比 使 用 其 他 Hypervisor， 用 户 在 选择 使 用 AHV 作 为 Hypervisor 时 可 以 得 到 最 优 的 成 本 、 最 全 面 的 技术 支持 服务 。 


6.1.2 ”Nutanix 功 能 在 Hypervisor 上 的 差异 


在 Nutanix 平 台中 可 以 支持 多 种 虚拟 化 系统 ， 除 了 虚拟 化 系统 本 身 存在 功能 


异 之 外 ，Nutanix 对 于 这 些 虚 拟 化 系统 的 支持 方式 和 功能 支持 方面 也 有 一 些 差 别 。 本 章节 将 介绍 Nutanix 对 不 同 


虚拟 化 系统 的 支持 差别 。 


Nutanix 提 供 大 量 的 功能 以 支持 不 同 的 应 用 场景 和 工作 负载 。 但 是 部 分 功能 与 Hypervisor 的 运行 原理 相关 ， 正 因 如 此 ， 可 能 会 导致 一 些 Nutanix 功 能 在 某 些 Hypervisor 不 可 用 。 因 此 ， 规 划 
设计 超 融 合 方案 时 ， 除 了 需要 考虑 虚拟 化 系统 的 功能 之 外 ， 还 需要 了 解 Nutanix 功 能 特性 是 否 在 计划 选择 的 虚拟 化 系统 上 可 用 。 


表 6-2 列 出 了 四 种 Hypervisor 上 的 功能 差异 ， 没 有 列 出 的 功能 表明 其 在 所 有 的 Hypervisor 上 均 可 用 。 


6-2 ”Nutanix 特 性 支持 表 


应 用 一 致 性 快照 | oe | | ®。 | 
Commvault 集 成 | e | ee | ®。 | 
跨 虚 拟 化 平台 DR | e. | [| 。 | 
DESIT | 9 | | ** — 
集成 耳 地 址 管理 (IPAM) | — | 。 | e | 
Metro Availability (Jim ey n] 3e ) | e | | 
同步 复制 |. | € | «X. 
TIKE | ee | ®。 | ®。 | 
网 络 可 视 化 
自助 门户 |。 


TEL ee 


( 2) 


RES 文件 服务 _e | | e - 
ta | e | | e —— 
LOLI AE e | |e - 


i: 图 表示 支持 ， 空 为 表示 不 支持 


针对 Nutanix AHV, VMware vSphere, Microsoft Hyper-V 这 三 种 Hypervisor，Nutanix 提 供 了 完全 工作 负载 的 支持 。 因 此 ， 在 这 三 个 Hypervisor 上 Nutanix 功 能 没有 过 多 限制 。 对 于 
Citrix XenServer， 因 为 XenServer 本 身 主要 定位 用 于 Citrix XenApp/XenDesktop 虚 拟 桌 面相 关 工作 负载 ， 因 此 Nutanix 没 有 支持 容 灾 、 数 据 复制 等 功能 。 


6.2 AHV 环 境 操作 


AHV 是 Nutanix 自 有 的 Hypervisor。AHV 基 于 KVM 开 发 但 是 Nutanix 为 其 增加 了 大 量 的 企业 级 特性 (如 增强 的 虚拟 化 HA、 动 态 资源 调度 、 自 动 化 管理 等 ) 并 提供 企业 级 技术 支持 ， 因 此 ， 
越 来 越 多 的 客户 将 AHV 作 为 在 Nutanix 超 融合 平台 上 首选 的 Hypervisor。 


CVM 用 尸 虚 拟 机 


[——-MM I/O-—— 


图 6-5 AHV 工 作 示 意图 


如 图 6-5 所 示 ，AHV 作 为 Hypervisor 层 ， 负 责 上 层 虚 拟 机 与 硬件 资源 间 的 资源 分 配 和 调度 。 在 AHV 之 上 运行 的 用 户 虚拟 机 的 所 有 IMO 会 先 转 到 Hypervisor，Hypervisor 再 将 MO 请 求 转发 给 
CVM, 


与 其 他 的 Hypervisor 不 同 的 是 ，AHV 安 装 完成 后 预 置 的 策略 可 以 满足 大 部 分 场景 的 需求 ， 管 理 员 甚 至 无 须 针对 高 可 用 、 在 线 迁 移 、 集 群 的 处 理 器 兼容 性 (类 似 VMware EVC 功 能 ) 、 动 态 
调度 、 虚 拟 网 络 进行 额外 的 配置 即 可 直接 使 用 。 


6.2.1 AHV 最 大 配置 


AHV 作 为 商用 的 Hypervisor， 可 以 支持 各 类 应 用 程序 的 负载 ， 用 户 在 AHV 上 运行 虚拟 机 时 需要 了 解 AHV Hypervisor 及 其 上 运行 虚拟 机 的 最 大 配置 : 
.集群 的 主机 数量 : 与 Nutanix 集 群 节点 数量 一 致 (无 上 限 ) 。 

- 单个 虚拟 机 vCPU 数 量 : 虚拟 机 所 在 主机 的 CPU 物理 核 数 。 

- 单个 虚拟 机 内 存 容 量 : TB. 

- 每 台 主 机 上 的 虚拟 机 数量 : 取决 于 节点 内 的 内 存 容量 与 CPU 性 能 。 


` 每 个 集群 的 虚拟 机 数量 : 取决 于 集群 中 节点 的 内 存 容 量 与 CPU 性 能 和 节点 数量 。 


6.2.2 ”Acropolis 动 态 调度 


与 VMware vSphere 的 DRS 功 能 类 似 ，Acropolis 动 态 调度 功能 (简称 ADS) 是 一 个 主动 监测 并 自动 修复 计算 与 存储 热点 的 功能 ， 一 旦 发 现 计算 与 存储 的 问题 ， 系 统 将 自动 执行 虚拟 机 热 迁 
移 计划 以 消除 热点 。 管 理 员 可 以 通过 Prism 控 制 台 的 任务 面板 监控 ADS 任 务 的 执行 情况 。 如 图 6-6 所 示 ， 当 系统 友 生 资源 争 抢 情况 时 ，ADS 自 动 触 友 庶 拟 机 热 迁 移动 作 。 


图 6-6 ADS 自 动 触发 虚拟 机 热 迁移 动作 


- ADS 功 能 可 以 带 来 以 下 好 处 : 

此 特性 可 以 根据 虚拟 机 的 配置 来 决定 在 哪 台 主机 上 开启 虚拟 机 。 

- ABS ( 块 服务 ) 使 用 ADS 特 性 来 负责 调度 外 部 的 ISCSI Initiatot 的 会 话 请 求 。 

i: ADS 功 能 默认 也 处 于 开启 状态 ， 并 推荐 保持 此 设置 。 管 理 员 可 以 通过 aCLI 方 式 禁 用 ADS 功 能 ， 当 ADS 功 能 被 关闭 后 ， 一 旦 发 生 资 源 的 争 抢 和 热点 的 情况 ， 管 理 员 可 以 通过 报警 面 

板 得 到 触发 的 报警 消息 ,但 系统 不 会 通过 ADS 功 能 进行 任何 的 操作 来 解决 资源 争 抢 的 问题 。 

: ADS 功 能 的 要 求 与 限制 : 

: 所 有 的 节点 需要 运行 AOS 5.0 或 更 新 版 本 。 

` 如 果 检 测 到 问题 ， 且 是 ADS 不 能 解决 的 问题 时 (如 CPU 和 存储 资源 有 限 ) ， 迁 移 计 划 可 能 会 失败 。 在 这 种 情况 下 ， 管 理 员 可 以 通过 控制 台 了 解 报警 情况 并 采取 必要 动作 。 

* 在 主机 、 固 件 以 及 AOS 的 升级 过 程 中 发 生 的 任何 资源 争 抢 ， 升 级 期 间 将 不 会 执行 资源 争 抢 的 处 理 。 

: ADS 功 能 的 关闭 与 开启 : 

- 管理 员 可 以 通过 登录 CVM 来 关闭 ADS: aCLI ads.update enable=false 

. 如 果 管 理 员 需要 开启 ADS 可 以 输入 : aCLI ads.update enable=true 


a ADS 作 为 一 项 Nutanix 集 群 特性 ， 可 以 支持 各 种 Hypervisor, 但 是 因为 各 个 Hypet-visor 均 有 提供 主机 计算 资源 的 动态 调度 功能 (如 VMware DRS, Citrix WLB4) ， 因 此 ，ADS 对 于 非 
AHV Hypervsior 仅 提供 存储 热点 的 平衡 ， 不 提供 主机 计算 能 力 的 平衡 功能 。 


6.2.3 AHV 高 可 用 性 配置 


AHV 高 可 用 性 (HA) 是 一 个 用 于 在 主机 或 机 架 出 现 故障 时 确保 虚拟 机 高 可 用 性 的 功能 。 当 主机 出 现 故障 时 ， 虚 拟 机 将 自动 在 集群 中 一 个 健康 的 节点 上 重新 启动 。Acropolis Master 负 责 
新 启动 虚拟 机 到 健康 节点 。Acropolis Master 通 过 监控 集群 中 所 有 主机 上 的 Libvirt 程 序 来 追 啼 主 机 的 健康 状态 ， 同 时 Acropolis Master 通 过 自动 选举 机 制 产生 ， 如 图 6-7 所 示 。 


CVM CVM CVM 


Acropolis Acropolis Acropolis 


Master Slave Slave 
A A 


ee nt a S 


A 
| Acropolis Master 通过 监控 各 个 主机 上 的 Libvirt 程序 来 追踪 主机 状态 和 故障 


L- 


图 6-7 HA 主机 监控 
- 默认 虚拟 机 HA 策略 


默认 情况 下 ， 当 主机 出 现 故 障 时 ，AHV 集 群 将 尽力 重新 局 动 虚拟 机 。 在 这 种 模式 下 ， 当 一 个 主机 变 得 不 可 用 时 ， 之 前 运行 的 虚拟 机 将 自动 在 健康 的 主机 上 重启 。 集 群 将 尽力 完成 这 个 动作 
(意味 着 资源 不 会 被 预 留 ) ， 是 否 可 以 重启 所 有 虚拟 机 取决 于 集群 中 仍 可 用 的 资源 。 管 理 员 可 以 在 配置 菜单 中 配置 HA 策略 ， 如 图 6-8 所 示 ， 人 在 默认 未 勾 选 Enable HA 的 情况 下 ， 当 一 个 主机 故障 


后 ， 集 群 会 使 用 “尽力 而 为 ”的 方式 在 其 他 健康 节点 上 重新 启动 受 影响 的 虚拟 机 。 


如 图 6-9 所 示 ， 当 管理 员 勾 选 上 Enable HA 选项 后 ， 系 统 将 自动 进行 主机 资源 的 预 留 ， 并 显示 内 存 预 留 的 数量 以 及 可 以 接受 失效 的 主机 数量 。 


Manage VM High Availability 


Enable HA 


High Availability ensures that VMs can be migrated and restarted 
on another node in the case of a single-host failure. 
Enabled: Up to 157.28 GiB of memory will be reserved to provide 


protection in the event of a single host failure. 


图 6-8 AHV 高 可 用 配置 


Manage VM High Availability 


() Enable HA 


High Availability ensures that VMs can be migrated and restarted 
on another node in the case of a single-host failure. 

Disabled: Resources are not reserved to handle high availability of 
VMs. In the case of a failure, VMs will be revived on a best-effort 
basis if resources are available. 


Cancel 


图 6-9 ”启用 HA 功能 
如 果 集 群 中 所 有 的 存储 容器 的 RF 均 设置 为 2， 那 么 将 允许 一 个 主机 失效 。 如 果 任 何 一 个 存储 容器 的 RF 设 置 为 3， 那 么 将 允许 两 个 主机 同时 失效 。 


如 有 需要 ， 管 理 员 可 以 登录 到 CVM 中 ， 并 执行 以 下 命令 设置 预 留 主机 的 数量 : 


acli ha.update num host failures to tolerate= 节 点 数量 


通过 以 下 命令 可 以 查询 当前 的 HA 配置 : 
acli ha.get 
如 果 不 希 望 对 某 些 虚拟 机 进行 HA 保护 ， 可 以 针对 虚拟 机 设置 ha_priority=-1 参 数 : 


acli vm.update < 虚拟 机 名 称 > ha priority--1 


Qi. 关于 aCLI 和 nCLI 命 令 的 操作 ， 在 6.8 节 会 详细 介绍 。 
在 进行 命令 行 操作 时 ，aCLI/nCLI 命 令 均 需 要 全 小 写 (Linux 命 令 对 大 小 写 敏感 ) o 
系统 将 上 自动 选择 一 个 节点 作为 预 留 主机 (节点 上 不 运行 任何 用 户 虚 拟 机 ) ， 如 图 6-10 所 示 。 


当 故 障 发 生 时 ， 所 有 故障 节点 上 的 虚拟 机 将 自动 在 预 留 主机 上 重新 局 动 ， 如 图 6-11 所 示 。 


图 6-10 ”HA 预 留 主机 


图 6-11 HA 预 留 主机 失效 虚拟 机 转移 


- AHV HA 配置 最 佳 实 践 
- 当 需 要 在 主机 故障 时 确保 所 有 的 虚拟 机 都 能 够 被 HA 功能 保护 ， 请 匀 选 Enable HA 选项 进行 资源 的 预 留 。 


` 在 配置 可 允许 的 HA 主机 数量 时 也 需要 考虑 到 Nutanix DSF 分 布 式 存储 的 可 用 性 和 要求， 设置 的 num_host_failures_to_tolerate 参 数 不 建 议 高 于 存储 的 可 接受 的 失效 节点 数量 ， 如 在 RF 为 2 的 集群 


里 ， 只 可 以 接受 一 个 主机 的 故障 ， 如 果 在 RF 为 2 的 情况 下 出 现 2 台 或 以 上 节点 故障 ， 虽 然 剩 余 主 机 的 CPU 和 内 存 的 资源 可 能 可 以 用 于 支持 HA，,， 但 是 因为 两 个 节点 同时 故障 会 导致 虚拟 机 数据 不 可 
用 (超过 了 RF 为 2 时 的 最 大 的 可 容忍 故障 数量 ) o 


. 在 配置 可 允许 的 HA 主机 数量 时 也 需要 考虑 到 Nutanix DSF 分 布 式 存储 的 可 用 性 要 求 ， 设 置 的 num_host_failures_to_tolerate 参 数 不 建 议 高 于 存储 的 可 接受 的 失效 节点 数量 ， 如 在 RF 为 2 的 集群 


里 ， 只 可 以 接受 一 个 主机 的 故障 ， 如 果 在 RF 为 2 的 情况 下 出 现 2 台 或 以 上 节点 故障 ， 虽 然 剩 余 主 机 的 CPU 和 内 存 的 资源 可 能 可 以 用 于 支持 HA，,， 但 是 因为 两 个 节点 同时 故障 会 导致 虚拟 机 数据 不 可 


用 (超过 了 RF 为 2 时 的 最 大 的 可 容忍 故障 数量 ) 。 通 过 hum_host_failutes_to_toletate 参 数 可 以 设置 可 接受 的 失效 节点 数量 ， 如 图 6-12 所 示 。 


RF=2， 人 允许 1 个 主机 失效 


故障 RF=3， 人 允许 2 个 主机 失效 


图 6-12 设置 可 允许 的 失效 主机 数量 


6.2.4 AHV 支 持 Citrix XenDesktop 


Citrix 作 为 桌面 与 应 用 虚拟 化 的 主要 供应 商 ，Nutanix 人 允许 将 Citrix XenApp 和 Xen-Desktop 工 作 负载 运行 在 Nutanix 超 融合 平台 之 上 ， 且 通过 了 Citrix Ready 认 证 。 

通过 安装 Nutanix Acropolis MCS 播 件 ， 管 理 员 可 以 在 Citrix Studio 管 理工 具 中 直接 对 Nutanix AHV 虚 拟 化 系统 上 运行 的 虚拟 桌面 进行 创建 、 维 护 等 生命 周期 管理 操作 ， 如 图 6-13 所 示 。 
使 用 AHV 作 为 Citrix XenDesktop 的 Hypervisor 时 ， 要 求 Citrix XenDesktop 的 版 本 为 7.9 或 更 新 版 本 ， 并 且 以 下 的 Citrix XenDesktop 特 性 在 AHV 上 和 暂 不 能 支持 : 

- Provisioning Services (简称 PVS， 功 能 可 由 MCS 功 能 替代 ， 计 划 在 2018 年 年 内 支持 PVS 的 功能 ) 

-vGPU (将 于 2017 年 年 内 支持 ) 

Linux 虚拟 桌面 

- AppDisk 


如 果 需 要 使 用 上 述 XenDesktop 特 性 ， 则 建议 选择 使 用 Citrix XenSserver 或 VMware vSphere 作 为 Hypervisor。 


6.2.5 节操 关闭 


在 超 融 合集 群 里 ， 每 个 节点 上 均 运 行 着 虚拟 机 并 存放 着 数据 ， 根 据 RF 设 置 的 不 同 ， 允 许可 同时 关闭 的 节点 数量 也 不 相同 。 因 此 ， 当 集群 中 的 一 些 节 点 需要 进行 硬件 维护 前 ， 有 必要 按照 规程 
关闭 或 迁 走 节 点 上 运行 的 虚拟 机 ， 同 时 对 CVM 和 AHV 主 机 进行 正确 的 电源 操作 。 


Studio Connection type: 


Citrix XenServer® 


Connection address: Microsoft® System Center Virtual Machine Manager 


VMware vSphere & 
Citrix CloudPlatform 
Network Password: Amazon ECZ 


Connection User name: 


i gyration Manager Wake on LAN 


Storage 


Connection name: 
Summary 


innection name appears in Studio; it helps administrators identify 


the Connection 


Create virtual machines using: 
è) Studio tools (Machine Creation Services) 


Other tools 


图 6-13 Citrix XenDesktop 支 持 在 AHV 上 进行 虚拟 机 管理 
对 AHV 的 节点 进行 操作 。 
1) 通过 SsH 连 接 到 CVM 控 制 合 。 


2) 通过 下 面 的 命令 列 出 集群 中 的 所 有 AHV 主 机 。 


acli host.list 
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图 6-14” 列 出 AHV 主 机 相关 信息 
如 图 6-14 所 示 ， 通 过 上 述 命令 可 以 得 到 计划 关闭 的 AHV 节 点 的 IP 地 址 (Hypervisor IP Address) 。 


3) 通过 下 面 的 命令 使 AHV 主 机 进入 维护 模式 。 


nutanix@CVM$ acli host.enter maintenance mode AHV} MIP wait=true 


4) 通过 下 面 的 命令 关闭 CVM 电 源 。 


nutanix@CVM$ CVM shutdown -P now 


5) 通过 SSsH 登 录 AHV 主 机 ， 使 用 下 面 的 命令 天 闭 AHV 主 机 。 


root@ahv# shutdown -h now 


Os 不 要 使 用 CVM_shutdown 命 令 以 外 的 任何 方式 重 置 或 者 关闭 CVM， 以 确保 集群 感知 到 CVM 不 可 用 。 


6.2.6 节操 局 动 


如 果 节 点 已 关闭 ， 请 按 前 面板 上 的 电源 按钮 加 电 。 待 节点 完成 上 电 后 继续 执行 如 下 步骤 : 
1) 通过 SSH 登 录 AHV 控 制 台 。 


2) 通过 以 下 命令 查找 CVM 虚 拟 机 的 名 称 。 


root@ahv# virsh list --all | grep CVM 
通过 上 述 命令 将 输出 所 有 的 虚拟 机 和 名称， 记录 CVM 虚 拟 机 的 名 称 ， 之 后 开启 CVM 虚 拟 机 时 需要 使 用 。 


3) 确定 CVM 虚 拟 机 是 否 已 经 开机 。 


如 果 CVM 虚 拟 机 未 开机 ， 输 出 的 结果 如 下 : 


NTNX-12AM2K470031-D-CVM shut off 


- 如 果 CVM 已 经 运行 ， 输 出 的 结果 如 下 : 


NTNX-12AM2K470031-D-CVM running 


如 果 CVM 处 于 关闭 状态 ， 可 以 使 用 下 面 的 命令 开启 CVM: 


root@ahv# virsh start CVM name 


- 如 果 AHV 节 点 当前 在 维护 模式 ， 需 要 通过 SSH 和 登录 CVM， 通 过 下 面 的 命令 退出 维护 模式 : 


nutanixQCVMS acli 
<acropolis> host.exit maintenance mode AHVi MIP 
<acropolis> exit 


4) 通过 SSsH 登 录 其 他 可 用 的 CVM ， 执 行 下 面 的 命令 查询 集群 状态 : 


nutanix@CVMS cluster status 


如 果 集 群 服 务 运 行 正常 ， 集 群 中 每 个 节点 的 输入 信息 都 与 图 6-15 类 似 。 
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图 6-15 ”集群 服务 状态 


6.3 VvSphere 环 境 操作 


Nutanix 超 融合 平台 支持 VMware vSphere 虚 拟 化 系统 ， 并 且 每 当 VMware vSphere 发 布 新 版 本 时 ，Nutanix 都 会 第 一 时 间 更 新 对 vSphere 的 支持 。 如 图 6-16 所 示 ， 通 过 VM DirectPath I/O 


技术 ，CVM 可 以 直接 挂 载 节 点 上 的 SCSI 控 制 器 (以 及 所 有 SSD/HDD) , ESXi Hypervisor 负 责 物理 资源 和 虚拟 资源 的 分 配 和 调度 。 
用 户 虚 拟 机 用 户 虚 拟 机 用 户 虚 拟 机 
ESXI “VM 1/O， 


ESXi :VM I/O ı ESXi “VM VO [7 


图 6-16 ESXi 的 节点 架构 


在 Nutanix Prism 控 制 台 中 ， 如 果 用 户 需 要 对 VMware 虚 拟 机 进行 管理 ， 则 需要 注册 vCenter Server 人 信息， 否则 在 Prism 界 面 中 将 不 能 对 虚拟 机 进行 操作 管理 。 管 理 员 可 以 在 配置 菜单 中 配置 
vCenter Server 注 册 ， 如 图 6-17 所 示 ， 管 理 员 在 Prism 中 对 vCenter Server 信 息 进行 注册 后 才 可 以 在 Prism 中 直接 进行 虚拟 机 的 管理 。 


his cluster to the vC enter server. 


Register t 


ADMIN USERNAME 


administrator£vsphere local 


ADMIN PASSWORD 


Cancel 


图 6-17  vCenter Server; At 


6.3.1 vSphere 最 大 配置 


当 底 层 的 Hypervisor 使 用 VMware ESXi 时 ，Nutanix 集 群 的 规模 会 受到 vSphere 本 身 的 限制 。 以 下 为 基于 vSphere 6.5 的 Nutanix 集 群 的 最 大 配置 和 限制 。 
` vSphere 集 群 的 主机 数量 : 64 台 (Nutanix 支 持 挂 载 同 一 Datastore 到 多 个 vSphere Cluster) 
- 单个 虚拟 机 vCPU 数 量 : 128 个 
` 单个 虚拟 机 内 存 容量 : OTB 
` 每 台 主 机 上 的 虚拟 机 数量 : 1024 个 
` 每 个 集群 的 虚拟 机 数量 : 8000 个 


| 每 个 启用 HA 的 集群 的 虚拟 机 数量 : 2048 个 


6.3. vSphere HA/DRS 配 置 


在 VMware 集群 中 ， 管 理 员 可 以 通过 配置 vyphere HA 和 DRS 来 实现 虚拟 机 的 高 可 用 保护 和 动态 的 资源 调度 来 确保 虚拟 机 的 性 能 。 
1) 使 用 vSphere Web Client 登 录 到 vCenter Server, 
2) 选择 Nutanix 集 群 ， 然 后 转 到 “管理 ”一 “设置 ”。 


3) 如 果 未 启用 vSphere HA 和 DRS， 则 可 以 从 vSphere DRS 和 vSphere HA 选项 卡 启用 它们 。 


Os 建议 配置 vSphere HA 和 DRS， 即 使 客户 没有 使 用 该 功能 的 计划 。 

4. 依 次 选择 “管理 ”一 “设置 ”一 “vSphere HA”， 然 后 单 击 “ 编 辑 , RogivSphere HA, 
5. 选 中 打开 vSphere HA 复 选 框 。 

a) 配置 集群 范围 内 的 主机 隔离 响应 设置 。 


b) 打开 故障 条 件 和 VM 响应 菜单 ， 然 后 从 主机 隔离 响应 下 拉 菜 单 中 选择 关闭 电源 并 重新 启动 虚拟 机 ， 如 图 6-18 所 示 。 


vSphere DRS zx = 
Failure conditions and VM 


Sphere HA " response 


Failure Response Details 
Host failure Restart VMs Restart VMs using VM restart priority ordering. 
Host Isolation Power off and restart VMs VMs on isolated hosts will be powered off 


and restarted on available hosts. 


Datastore with Permanent Disabled Datastore protection for All Paths Down and 

Device Loss Permanent Device Loss is disabled. 

Datastore with All Paths Disabled Datastore protection for All Paths Down and 

Down Permanent Device Loss is disabled. 

Guest not heartbeating Disabled VM and application monitoring disabled. 
VM restart priority | Medium X 


When Disabled is selected, vitual machines are not restarted in the event of a host 
failure. In addition, they remain Protected when Turn on vSphere HA is enabled. 


Response for Host Isolation | Power off and restart VMs 


Response for Datastore with 


Permanent Device Loss (PDL) | Disabled * 
Response for Datastore with All - 

Paths Down (APD) [Disabled = sid 
Response for APD recovery | eT - 


after APD timeout 


OK || Cancal 


图 6-18 HA 配置 


c) 单 击 “OK” 按 钮 。 
d) 配置 所 有 Controller VM 的 主机 隔离 响应 设置 。 
e) 依次 选择 “管理 ”一 “设置 ”一 “VM 覆 羡 ”， 然 后 单 击 编辑 。 


f) 从 “主机 隔离 响应 ” “VM 重新 启动 优先 级 ” “VM 监控 ”下 拉 菜 单 中 选择 “禁用 ”， 如 图 6-19 所 示 。 


VM restart priority: | Disabled | M | 
Response for Host [salatian: | Disabled | z | 
| nai — — on ie Use Cluster Settings = 
on niis mE — " Use Cluster Settings M 
Delay for VM failover for APL Use Cluster Settings! * | minutes 
vro ain Minna Use Cluster Settings 7 
VM Monitoring Disabled |» | 


+ Relevant Cluster Settings 


Kk Vophere HA Expand for details 


图 6-19 HAB X 
6) 配置 数据 存储 监视 。 
a) 转 到 “vSphere HA” 一 “数据 存储 心跳 ”。 
b) 选择 仅 从 指定 的 列表 中 使 用 数据 存储 ， 然 后 选择 Nutanix 数 据 存储 。 


c) 若 集群 如 所 建议 的 只 有 一 个 数据 存储 ， 单 击 高 级 选项 ， 添 加 名 为 das.ignorelnsufficientHbDatastore 的 选项 ， 设 置 值 为 true， 然 后 单 击 “ 确 定 ”。 
c 配置 此 设置 后 ， 需 要 清除 “打开 vSphere HA” 复 选 框 并 等 待 集群 中 的 所 有 主机 重新 配置 HA， 然 后 再 次 启用 HA， 选 中 打开 vSphere HA 复 选 框 。 
7) 如 果 集 群 不 使 用 vsphere HA， 请 在 “集群 功能 ”页 面 上 禁用 它 ; 否则 ， 继 续 下 一 步 。 

8) 依次 选择 “管理 ”一 “设置 " "vSphere DRS" 并 单 击 编辑 来 配置 DRS。 

9) 单 击 打开 vSphere DRS 复 选 框 。 


Qi J&DRS B SACR EP, Nutanix££ BUR LRA LB AARE AACR, iX ARBORE T VALE SORTI FE QUA AF RA KACO IAAP EI PESE. 


a) 配置 所 有 Controller VM 的 自动 化 级 别 设置 。 


b) 依次 选择 “管理 ”一 “设置 ”一 “VM 覆 苹 ”， 然 后 单 击 编辑 。 


c) 将 所 有 Controller VM 的 “自动 化 级 别 ”设置 更 改 为 “禁用 ”， 如 图 6-20 所 示 ， 


Automation level: | Disabled 
- = | minutes 


图 6-20 HA 配置 
d) 单 击 确定 。 
e) 依次 选择 “管理 ”一 “设置 ”一 “vSphere DRS”， 然 后 单 击 编辑 。 
f) 确认 选择 “关闭 ”作为 集群 的 默认 电源 管理 。 
10) 如 果 集 群 不 使 用 vSphere DRS， 请 在 “集群 功能 ”页 面 上 禁用 它 。 


11) 单 击 确定 ， 关 闭 集群 设置 窗口 。 


6.3.3 vSphere EVC 本 置 


以 下 列 出 了 如 何在 VMware vSphere Web 客 户 端 中 启用 EVC。 

1) 选择 清单 中 的 集群 。 

2) 关闭 主机 上 功能 集 大 于 EVC 模 式 的 所 有 虚拟 机 ， 确 保 集群 包含 只 有 一 个 供应 商 (Inte| 或 AMD) 的 CPU 的 主机 。 
3) 单 击 管理 选项 卡 ， 选 择 VMware EVC 并 单 击 编辑 。 

4) 局 用 适用 于 集群 中 主机 的 CPU 供应 商 和 指定 集 的 EVC， 然 后 单 击 确认 。 

5) 局 动 集群 中 的 虚拟 机 以 应 用 EVC。 


如 果 尝 试 在 不 匹配 的 主机 功能 集 (混合 处 理 器 ) 的 集群 上 启用 EVC， 选 择 最 低 的 通用 功能 集 (最 低 处 理 器 ) 。 因 此 ， 如 果 需 要 在 主机 上 启用 EVC， 且 已 经 有 VM 在 更 高 的 CPU 指 令 集 的 主机 
上 运行 ， 则 需要 先天 闭 该 虚拟 机 ， 然 后 开启 EVC。 


O- 不 要 同一 时 间 关 闭 多 个 节点 上 的 Controller VM， 否 则 可 能 会 导致 集群 故障 。 


6.34 VAAIx 


VMware vSphere Storage API 阵 列 集成 〈 简 成 VAAI) 也 称 硬 件 加 速 或 硬件 Offload API，VAAI 通 过 API 方 式 让 ESXi 主 机 与 存储 设备 之 间 直 接 进 行 通信 ， 人 允许 以 往 需要 在 ESXi 主 机 进行 处 理 
的 存储 操作 如 快照 、 克 隆 等 直接 交 由 存储 设备 来 完成 。 通 过 VAAI 功 能 可 以 减少 ESXi 主 机 以 及 网 络 的 资源 开销 ， 极 大 改进 存储 操作 的 性 能 。VAAI 的 目标 是 帮助 存储 广 商 提供 硬件 协助 来 加 速 那些 
在 存储 硬件 上 可 以 更 高 效 完成 的 VMWare I/O 操 作 。 


Nutanix DSF 在 vSphere 上 可 以 提供 VAAI 的 支持 ， 通 过 Nutanix Foundation 工 具 完 成 ESXi 系 统 的 安装 时 将 自动 在 ESXi 上 安装 支持 VAAI 的 VIB 包 。 管 理 员 可 以 通过 ssh 工 具 登 录 到 ESXi 主 机 上 
执行 esxcli software vib listlgrep vaai 命 令 来 查询 Nutanix 提 供 的 nfs-vaai-plugin 的 版 本 和 状态 信息 ， 如 图 6-21 所 示 。 


图 6-21 查询 VAAI 版 本 信息 


在 vSphere client 上 进行 数据 存储 的 浏览 时 可 以 看 到 由 Nutanix 创 建 的 存储 容器 的 “硬件 加 速 ”功能 的 状态 为 “ 受 文 持 ”， 如 图 6-22 所 示 。 


入 门 摘要“ 虚拟 机 “性 能 (Em 任务 与 事件 “警报 “权限 “映射 ， 存 傅 视 图 “硬件 状态 


Liu 查看 : | 数据 存储 ”设备 
处 理 器 数据 存 请 刷新 W ”添加 存 彤 器..， ”全 部 重新 扫 措 .… 
内 存 标记 - |i 可 用 空间 | 类 型 警报 操作 硬件 加 速 A 


^ Trias Ej NTNXdocal-bHs-i4. l ^ 50.89 GB VMFS5 已 启用 未 知 
网络 E 
TEs = = -— e: — 
pode ates 数据 存储 证 细 售 息 Bett... 
Taken NTNX-NFS-DEFAULT ve 
LLLI 服务 器 : — 192.168.5.2 RUE AE 
WS: — JNTNX-NFS-DEFAULT 84.12GB E Om 


图 6-22 ”查询 数据 存储 硬件 加 速 状态 


通过 ssh 工 具 登 录 到 ESXi 主 机 上 执行 esxcli storage nfs list 命 令 也 同样 可 以 查询 数据 存储 的 硬件 加 速 状态 。 如 图 6-23 所 示 ，Hardware Acceleration 的 状态 为 Supported。 


ge 10.132.69.21 - PuTTY 


图 6-23 ”用 命令 行 查询 VAAI 状 态 


63.5 PANA 


Os 如 果 集 群 设置 为 元 余 因 子 2 (RF=2) ， 只 能 同时 关闭 每 个 集群 的 一 个 节点 。 如 果 一 个 元 余 因子 为 2 的 集群 需要 有 多 于 一 个 节点 关闭 ， 则 需要 停止 整个 集群 ， 操 作 方 法 请 参考 6.6.1.1 


st 


1) 使 用 vSphere Web 客 户 端 登录 vCenter Server, 

2) 如 果 未 启用 DRS， 手 动迁 移 除 CVM 的 所 有 虚拟 机 到 集群 中 的 其 他 主机 ， 或 者 将 你 不 想 迁 移 到 其 他 主机 的 虚拟 机 关闭 (CVM 除 外 ) 。 
3) 如 果 已 启用 DRS， 略 过 此 步骤 。 

4) 右键 点 击 主机 ， 选 择 “维护 模 式 ” 一 “进入 维护 模式 ”。 

5) CPAP, Ache. 


主机 处 于 维护 模式 ， 可 防止 虚拟 机 在 该 主机 上 运行 。DRS 自 动 尝试 将 所 有 虚拟 机 迁移 到 集群 中 的 另 一 个 主机 。 


Qs 如 果 未 启用 DRS， 则 需要 手动 迁移 或 关闭 除 CVM 外 的 所 有 虚拟 机 。 即 使 启用 DRS 也 不 会 自动 迁移 的 虚拟 机 可 能 是 由 于 目标 主机 上 不 存在 该 虚拟 机 中 的 配置 选项 。 


6) 使 用 SSH 登 录 CVM， 执行 下 面 的 命令 来 关闭 CVM。 


nutanix@CVM$ CVM shutdown -P now 


Qs 不 要 使 用 CVIM_shutdown 命 令 以 外 的 任何 方式 重 置 或 者 关闭 CVM， 以 确保 集群 感知 到 CVM 不 可 用 。 
7) 右键 单 击 主机 ， 选 择 关 闭 。 


等 待 vCenter Server 显 示 主 机 没有 响应 ， 这 个 过 程 可 能 需要 几 分 钟 。 如 果 你 登录 到 该 ESXi 主 机 (而 不 是 vCenter Server) ， 当 主机 关闭 时 vSphere 客 户 端 也 会 断 开 连接 。 


6.3.6 节操 局 动 


如 果 节 点 已 关闭 ， 按 节点 前 面板 上 的 电源 按钮 加 电 。 待 节点 完成 上 电 后 继续 执行 如 下 步骤 : 

1) 使 用 vSphere Web 客 户 端 登录 vCenter Server (如 果 vCenter Server 未 运行 ， 使 用 vSphere 客 户 端 直接 登录 到 该 节点 ) 。 
2) 右键 点 击 ESXi 主 机 ， 并 选择 “退出 维护 模式 ”。 

3) 右键 点 击 CVM ， 并 选择 “电源 ”一 “局 动 ”。 等 待 大 约 5 分 钟 ， 让 所 有 服务 在 CVM 上 局 动 。 

4) 通过 SSH 登 录 到 集群 中 另 一 个 CVM.。 

5) 在 CVYM 上 确认 集群 服务 都 已 正常 运行 ， 执 行 以 下 命令 。 

nutanix@CVMS ncli cluster status | grep -A 15 CVM IP 地 址 


结果 如 6- 24 所 示 。 
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图 6-24 检查 集群 服务 状态 
验证 上 面 列 出 的 每 个 服务 的 状态 都 应 该 是 up 状态 。 
6) 在 vSphere Web 客 户 端 中 右键 点 击 ESXi 主 机 ， 并 选择 重新 扫描 Datastore。 确 认 所 有 Nutanix datastore 都 是 可 用 状态 。 


7) 通过 以 下 命令 在 CVYM 上 验证 所 有 节点 的 服务 都 是 UP。 


nutanix@CVMS cluster status 


如 果 集 群 运行 正常 ， 集 群 中 每 个 节点 的 输出 都 与 图 6-25 类 似 。 
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[6-25 Nutanix 集 群 服务 状态 


当 通 过 Foundation 工 具 进 行 集群 的 部 署 时 ，Nutanix Foundation 工 具 会 自动 完成 包括 Nutanix 软 件 以 及 ESXi 主 机 相关 的 配置 。 以 下 的 配置 除非 得 到 Nutanix 技 术 支持 人 员 指 导 ， 否 则 不 允 
许 手工 修改 这 些 配置 。 


: Nutanix 软 件 

- 本 机 DataStore 名 称 

: CVM 的 配置 与 内 容 ， 包 括 虚 拟 机 名 称 、 虚 拟 硬件 配置 
- ESXi 配 置 

: NFS 设 置 

: VM 交换 文件 位 置 

: VM 启动 /关闭 顺序 

"iSCSI 软件 卡 设 置 

- vSwitch Nutanix 标 准 虚拟 交换 机 

- Management Netwotk 端 口 组 中 的 vmk0 接 口 配 置 
启用 SSH 

" 打开 主机 防火 墙 


对 CVM 执 行 快照 


© Nutanix 软 件 在 出 厂 和 安装 过 程 中 将 自动 进行 上 述 组 件 的 配置 。 


Microsoft Hyper-V 作 为 主流 的 虚拟 化 平台 之 一 ，Nutanix 平 台 也 同样 对 其 提供 了 支持 ， 基 于 Hyper-V 构 建 Nutanix 集 群 可 以 让 用 户 使 用 到 所 有 的 Hyper-V 功 能 特性 的 同时 ， 也 让 用 户 得 到 超 
融合 系统 带 来 的 扩展 性 、 易 管理 性 和 灵活 性 。Nutanix 分 布 式 存储 框架 对 于 Hyper-V 可 以 提供 如 SMB 3.0、ODX、TRIM 等 特性 的 支持 ， 借 助 Nutanix 提 供 的 这 些 存 储 特性 ， 可 以 让 在 Hyper-V 之 
上 运行 的 虚拟 机 得 到 更 好 的 性 能 和 磁盘 使 用 量 。 其 原理 如 图 6-26 所 示 。 


虚拟 机 
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图 6-26 ”Nutanix 与 Hyper-V 集 成 


6.4.1 Hyper-V 最 大 配置 


在 Nutanix 平 台 上 使 用 Hyper-V 时 ， 将 受到 最 大 配置 与 扩展 性 限制 ， 以 Hyper-V 2012 R2 为 例 列 出 其 最 大 配置 : 
: HyperV 集 群 的 主机 数量 : 648 

. 单个 虚拟 机 的 vCPU 数 量 : 64 个 

` 单个 虚拟 机 内 存 容量 : 1TB 


最 大 虚拟 磁盘 容量 : 64TB 


- 每 台 主 机 上 的 虚拟 机 数量 : 10244 


. 每 个 集群 的 虚拟 机 数量 : 8000 个 


64.2 ”ODX 和 存储 优化 特性 支持 


Nutanix 借 助 Hyper-V 提 供 的 ODX 可 以 来 实现 存储 的 优化 。Hyper-V 中 提供 的 卸载 数据 传输 (ODX) 功能 与 VMware VAAI 技 术 的 作用 类 似 ， 通 过 ODX 可 以 将 存储 操作 交 由 存储 系统 来 完 


成 ， 由 此 可 以 超载 Hyper-V 主 机 的 负载 。 通 过 ODX 可 以 提高 存储 操作 的 效率 。 如 图 6-27 所 示 ， 当 管理 员 需 要 在 主机 或 虚拟 机 之 间 执 行 大 文件 复制 操作 时 ，ODX 将 文件 复制 任务 交 由 分 布 式 仓储 
层 来 自动 完成 ， 以 减少 网 络 流量 占用 、 提 高 复制 效率 。 
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图 6-27 ODX 工 作 原 理 
基于 Hyper-V 构 建 的 Nutanix 集 群 默 认 开 启 ODX 特 性 ， 管 理 员 不 需要 进行 额外 的 操作 束 可 以 借助 ODX 来 提高 存储 操作 的 效率 。 


管理 员 可 以 通过 命令 来 验证 ODX 是 否 开启 ， 管 理 员 可 以 打开 Windows PowerShell (在 管理 工具 里 面 ) , fj get-itemproperty hklm: \system\currentcontrolset\control\filesystem- 


name"FilterSupportedFeaturesMode"， 如 果 FilterSupportedFeaturesMode 输 出 的 数值 为 0， 则 证 明 ODX 功 能 开局 。 当 数值 为 1 时 ， 则 证 明 ODX 功 能 已 经 被 关闭 。 


管理 员 可 以 通过 Set-ltemProperty HKLM: \SYSTEM\CurrentControlSet\Control\FileSystem-Name' FilterSupportedFeaturesMode"-Value 0 来 开启 ODX。 


管理 员 也 可 以 通过 Set-ltemProperty HKLM: \SYSTEM\CurrentControlSet\Control\FileSystem-Name'FilterSupportedFeaturesMode"-Value 1 命令 来 关闭 ODX 功 能 。 


64.3 ”节点 关闭 


与 其 他 Hypervisor 一 样 ， 基 于 Hyper-V 的 Nutanix 集 群 中 的 主机 如 果 需 要 进行 关机 操作 时 也 需要 遵循 以 下 的 关机 流程 。 
在 计划 关机 的 节点 上 ， 将 虚拟 机 关闭 或 在 线 迁 移 到 集群 中 的 其 他 节点 之 上 。 


1) 通过 SSH 登 录 到 计划 关闭 的 节点 的 CVYM 上 ， 并 执行 如 下 命令 : 


nutanix@CVM$ CVM shutdown -P now 


Q.. 不 要 使 用 CVM_shutdown 命 令 以 外 的 任何 方式 重 置 或 者 关闭 CVM， 以 确保 集群 感知 到 CVM 不 可 用 。 


2) 通过 远程 桌面 工具 连接 到 计划 关闭 的 Hyper-V 节 点 ， 并 启动 PowerShell 来 执行 主机 关机 命令 : 


shutdown /i 


644 节点 启动 


如 果 节 点 已 关闭 ， 请 按 节点 前 面板 上 的 电源 按钮 加 电 。 点 完成 上 电 后 继续 执行 如 下 步 又 : 
1. 通 过 远程 桌面 工具 连接 Hyper-V 主 机 并 启动 PowerShell。 


2. 使 用 以 下 命令 检查 CVM 是 否 已 经 运行 : 


> Get-VM | Where {5 .Name -match 'NTNX.*CVM'] 


` 如 果 CVM 处 于 关闭 状态 ， 执 行 上 述 命令 时 会 输出 类 似 : 


NTNX-13SM35230026-C-CVM Stopped - - - Operahttp://www.hzcourse.com/resource/readBook?path-/openresources/teach ebook/uncompressed/17163/OEBPS/Text/... 


- 如 果 CVM 处 于 运行 状态 ， 执 行 令 时 会 输入 类 似 : 


P 


NTNX-138M35230026-C-CVM Running 2 16384 05:10:51 Operahttp://www.hzcourse.com/resource/readBook?path=/openresources/teach_ebook/uncompressed/17163/OEBPS/Text/... 


3. 通 过 以 下 命令 启动 CVM : 


Start-VM -Name NINX-*CVM 


4. 使 用 以 下 命令 确认 Container 是 否 已 经 可 用 : 


Get-Childitem \\CVM IF 地 址 \ 存 储 容器 名 称 


5. 通 过 SSH 登 录 到 集群 中 可 用 的 CVM。 


通过 以 下 命令 验证 所 有 的 服务 都 工作 正常 : 


nutanix@CVMS cluster status 


如 果 集 群 运行 上 正常， 集群 中 每 个 节点 的 输出 都 与 图 6-28 类 似 。 
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图 6-28 ”Nutanix 集 群 状态 查询 


6.4.5 SCVMM 管 理 


对 于 以 Hyper-V 为 基础 的 Nutanix 集 群 环境 ， 当 使 用 Nutanix Foundation 部 署 完 集群 之 后 ， 管 理 员 登 录 Prism 控 制 台 时 ， 点 击 齿 轮 按钮 (配置 功能 ) 后 将 看 到 如 图 6-29 所 示 的 两 个 任务 : 


Complete Cluster Setup (1 of 2 steps) 


Te] 


图 6-29 ”Hyper-V 集 群 操作 
` 将 集群 和 主机 加 入 域 
- 配置 故障 切换 集群 


Join Cluster and Hosts to the Domain 功 能 用 于 将 Hyper-V 主 机 和 Nutanix 集 群 加 入 域 ， 如 图 6-30 所 示 ， 管 理 员 可 以 指定 待 加 入 的 域 的 名 称 、DNS 服 务 器 的 IP 地 址 、Nutanix 集 群 名 称 、 
集群 虚拟 IP 地 址 等 信息 ， 点 击 Join 按 钮 后 ， 主 机 将 自动 重启 以 完成 相关 的 操作 动作 。 


Here you can join the cluster and its constituent hosts to an Active Directory domain. This step 


requires a reboot. 
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图 6-30 ”将 主机 及 集群 加 入 域 操 作 


之 后 管理 员 需 要 通过 SCVMM 管 理 控制 台 将 之 前 完成 加 入 域 的 Hyper-V 主 机 加 入 到 SCVMM 控 制 台 进行 统一 管理 ， 如 图 6-31 所 示 。 
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图 6-31 在 SCVMM 中 添加 Hyper-V 主 机 


之 后 ， 管 理 员 可 以 通过 Nutanix Prism 中 提供 的 Configure Failover Cluster 功 能 来 配置 Hyper-V 故 障 转移 集群 ， 而 不 需要 管理 员 手 工 通过 Windows 系 统 提供 的 故障 转移 群集 管理 器 
(Failover Cluster Manager) 进行 复杂 的 配置 ， 如 图 6-32 所 示 ， 管 理 员 通 过 配置 故障 切换 集群 的 名 称 以 及 IP 地 址 ， 当 点 击 Create cluster 按钮 后 ， 系 统 将 自动 将 所 有 的 Hyper-V 主 机 加 入 到 同 


一 Failover Cluster 中 。 


This step allows you to setup a Hyper-V failover cluster. 
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图 6-32 ”配置 故障 转移 集群 


Windows 故 障 转移 集群 功能 可 用 于 文件 服务 器 、 打 印 服务 器 、 数 据 库 服务 器 、Hyper-V 虚 拟 化 等 ， 通 过 故障 转移 集群 功能 可 以 帮助 应 用 提高 可 用 性 ， 防 止 因为 主机 硬件 或 软件 的 单 点 故障 
引发 业务 停机 。Hyper-V 中 的 高 可 用 特性 基于 Windows 故 障 转移 集群 实现 。 


65 XenServer 环 境 操作 


Nutanix 在 AOS 5.1 版 本 中 也 开始 提供 对 Citrix XenServer 的 支持 。 用 户 可 以 借助 Nutanix 集 群 的 能 力 并 结合 Citrix XenServer 的 优势 来 运行 虚拟 桌面 相关 负载 。 集 成 Nutanix 和 Citrix 
Xenserver 可 以 使 用 户 得 到 超 融 合 技术 的 优势 ， 如 可 扩展 性 和 简易 性 ， 同 时 这 也 允许 Nutanix 的 用 户 部 署 XenServer 到 Nutanix 超 融合 平台 之 中 ， 利 用 XensServer 成 熟 、 完 整 的 功能 特性 以 及 良好 
的 集成 性 (如 与 XenApp/XenDesktop 的 MCS/PVS/APP Disk 特 性 ) ，Nutanix 用 户 能 够 从 Citrix XenServer 的 支持 中 得 到 以 下 技术 优势 : 


| 支持 GPU 虚拟 化 

- 支持 通过 Windows Update 提 供 虚 拟 机 了 驱动 程序 
- 支持 Docker 容 器 

. 支持 PVS 读 缓存 


. 支持 通过 API 进 行 高 级 的 威胁 检测 


i Nutanix 不 支持 在 基于 XenServer 的 Nutanix 集 群 上 运行 非 XenApp/XenDesktop 负 和 载 ，Nutanix 对 于 XenServer 上 运行 的 工作 负载 上 的 限制 与 XenServet 的 产品 和 市 场 定 位 有 着 直接 关系 。 


6.5.1 XenServer 最 大 本 置 


基于 XenServer 的 Nutanix 集 群 ， 将 受到 XenServer 自 身 的 最 大 配置 与 扩展 性 限制 ， 以 XenServer 7.1 为 例 ， 最 大 配置 信息 如 下 : 
` 最 大 资源 池 主 机 数量 : 168 

. 单个 虚拟 机 的 vCPU: 32 个 

` 单个 虚拟 机 内 存 容量 : 1.5TB 

- 最 大 虚拟 磁盘 容量 : 2TB 减 4GB 

. 每 台 主 机 上 的 虚拟 机 数量 : 1000 个 

每 资源 池 允 许 的 虚拟 机 数量 : 4096 个 


- 每 主机 可 活动 的 虚拟 磁盘 数量 : 4096 个 


6.5.2 XenServer SiR ail 


如 果 需 要 在 Nutanix 集 群 中 运行 XenServer， 需 要 满足 以 下 版 本 要 求 : 
- Citrix XenServer 7.1 或 更 新 版 本 
Nutanix Foundation 3.7 或 更 新 版 本 
- Nutanix AOS 5.1 或 更 新 版 本 
另外 ， 当 前 仪 支持 在 Nutanix 指 定 的 超 融 合 节 点 型 号 上 运行 XenServer， 这 些 节点 型 号 包括 : 
- NX-1065-G5 
- NX-3060-G5 


: NX-3175-G5 


: NX-3175-G5 (支持 NVIDIA M60) 


65.3 TAAA 


关闭 XenServer 节 点 前 需要 先 关闭 CVM ， 然 后 将 XenServer 节 点 进入 维护 模式 ， 最 后 再 关 XenServer 主 机 。 当 将 XenServer 节 点 进入 维护 模式 之 后 ， 所 有 正在 运行 的 虚拟 机 将 自动 迁移 到 集 
群 中 的 其 他 主机 之 上 。 


1) 通过 SSH 登 录 到 CVM。 


2) 使 用 如 下 命令 关闭 CVM: 


nutanix@CVM$ CVM shutdown -P now 


© 不 要 使 用 CVM_shutdown 命 令 以 外 的 任何 方式 重 置 或 者 关闭 CVM， 以 确保 集群 感知 到 CVM 不 可 用 。 
3) 打开 XenCenter 控 制 侣 ， 在 资源 面板 中 选择 对 应 的 主机 ， 点 击 服务 器 菜单 ， 单 击 进入 维护 模式 。 


4) 打开 XenCenter 控 制 台 ， 在 资源 面板 中 选择 对 应 的 主机 ， 点 击 工具 栏 中 的 关机 按钮 天 机 。 


如 果 节 点 已 关闭 ， 请 按 前 面板 上 的 电源 按钮 加 电 。 待 节点 完成 上 电 后 继续 执行 如 下 步骤 : 
1) 打开 XenCenter 控 制 台 ， 在 资源 面板 中 选择 对 应 的 主机 ， 点 击 服 务 器 菜单 ， 单 击 退 出 维护 模式 。 


2) 通过 SSH 工 具 登 录 CVM 控 制 台 ， 并 执行 以 下 的 命令 : 


nutanix@CVMS cluster status 
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图 6-33 Nutanix Í& 8E Jk A 


当 使 用 Nutanix Foundation 完 成 集群 的 部 署 之 后 ， 集 群 便 可 以 正常 工作 。 管 理 员 需要 通过 XenCenter 工 具 将 通过 Foundation 推 送 的 Xenserver 主 机 加 入 到 同一 资源 池 。 
1) 开启 XenCenter 控 制 台 。 

2) 在 XenCenter 主 页 ， 点 击 添加 新 服务 器 ， 如 图 6-34 所 示 。 

3) 在 服务 器 栏 中 输入 XenServer 主 机 的 IP 地 址 (之 前 由 Nutanix Foundation 推 送 ) 。 

4) 在 用 户 名 和 密码 栏 中 输入 XenServer 的 管理 员 凭证 ， 然 后 点 击 添加 。 


5) 添加 完成 后 ， 在 XenCenter 上 将 看 到 主机 信息 ， 如 图 6-35 所 示 。 
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图 6-35 XenServer PAF & 


Qi 在 XenCenteft 上 看 不 到 CVM 庶 拟 机 的 信息 ， 这 是 因为 Cittix 与 Nutanix 联 合 开发 后 有 意 设 计 将 CVM 进 行 了 隐藏 。 如 果 管 理 员 需要 对 CVM 虚 拟 机 进行 操作 ， 可 以 通过 SSH 登 录 到 


XenServer 主 机 使 用 相关 命令 执行 操作 。 


- 检查 CVM 状 态 : user@host$systemctl status nutanix-cvm 


: 重启 CVM: user@host$systemctl restart nutanix-cvm 


: 停止 CVM: user@host$systemctl stop nutanix-cvm 


: 启动 CVM: user@host$systemctl start nutanix-cvm 


Nutanix 集 群 服务 的 操作 流程 也 至 天 重要 ， 正 确 的 操作 是 保证 集群 服务 健康 运行 的 基础 。 在 某 些 情况 下 ， 管 理 员 需要 对 超 融 合 环境 进行 停机 维护 (如 数据 中 心 电 源 线 路 切换 ) ， 在 这 种 情 
下 ， 管 理 员 需要 手工 进行 集群 服务 的 关闭 与 启动 。 


1. 在 停止 集群 服务 前 ， 请 确保 关闭 除 CVM 之 外 的 所 有 用 户 虚 拟 机 (如 果 vCenter Server 也 运行 在 Nutanix 集 群 之 上 ， 也 请 关闭 vCenter Server) , 


2. 通 过 SSH 工 具 登 录 到 CVM 上 .。 
3. 执 行 cluster stop 命 令 停止 集群 服务 。 


当 执 行 完 cluster stop 命 令 之 后 ， 集 群 服务 将 自动 停止 命令 输出 的 结果 如 图 6-36 所 示 。 
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图 6-36 停止 集群 服务 


当 完 成 上 述 的 操作 之 后 ， 管 理 员 可 以 通过 SSH 工 具 登 录 到 CVM 和 所 有 主机 执行 关机 操作 来 关闭 所 有 的 CVM 以 及 超 融合 节点 。 


当 需 要 启动 集群 时 ， 确 保 所 有 的 超 融 合 节点 都 已 经 开机 ， 如 果 节 点 未 开机 ， 请 按 节点 前 面板 上 的 电源 按钮 加 电 。 


当 所 有 的 超 融 合 节点 的 Hypervisor 均 已 经 启动 完成 之 后 (根据 Hypervisor 类 型 以 及 硬件 配置 ，Hypervisor 启 动 需要 几 分 钟 时 间 ) ， 再 通过 SSH 工 具 连 接 到 任意 一 台 CVM 中 ， 执 行 cluster 
start 启 动 集群 服务 。 


当 执 行 完 cluster start 命 令 之 后 ， 集 群 服务 将 自动 启动 ， 命 令 输 出 的 结果 如 图 6-37 所 示 。 
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Nutanix 集 群 服务 的 操作 流程 也 至 天 重要 ， 正 确 的 操作 是 保证 集群 服务 健康 运行 的 基础 。 在 某 些 情况 下 ， 管 理 员 需要 对 超 融 合 环境 进行 停机 维护 (如 数据 中 心 电 源 线 路 切换 ) ， 在 这 种 情况 
下 ， 管 理 员 需要 手工 进行 集群 服务 的 天 闭 与 启动 。 


1. 在 停止 集群 服务 前 ， 请 确保 关闭 除 CVM 之 外 的 所 有 用 户 虚拟 机 (如 果 vCenter Server 也 运行 在 Nutanix 集 群 之 上 ， 也 请 关闭 vCenter Server) 。 
2. 通 过 SSsH 工 具 登 录 到 CVM 上 。 
3. 执 行 cluster stop 命 令 停止 集群 服务 。 


当 执 行 完 cluster stop 命 令 之 后 ， 集 群 服务 将 自动 停止 命令 输出 的 结果 如 图 6-36 所 示 。 
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图 0-30 


当 完 成 上 述 的 操作 之 后 ， 管 理 员 可 以 通过 SSH 工 具 登 录 到 CVM 和 所 有 主机 执行 关机 操作 来 关闭 所 有 的 CVM 以 及 超 融合 节点 。 


6.6.1.2 ”集群 服务 启动 


当 需 要 启动 集群 时 ， 确 保 所 有 的 超 融 合 节 点 都 已 经 开机 ， 如 果 节 点 未 开机 ， 请 按 节点 前 面板 上 的 电源 按钮 加 电 。 


当 所 有 的 超 融 合 节点 的 Hypervisor 均 已 经 启动 完成 之 后 (根据 Hypervisor 类 型 以 及 硬件 配置 ，Hypervisor 启 动 需要 几 分 钟 时 间 ) ， 再 通过 SSH 工 具 连 接 到 任意 一 台 CVM 中 ， 执 行 cluster 
start 启 动 集群 服务 。 


当 执 行 完 cluster start 命 令 之 后 ， 集 群 服务 将 自动 启动 ， 命 令 输 出 的 结果 如 图 6-37 所 示 。 
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6.6.2 ”虚拟 化 层 VLAN 修 改 


当 使 用 Foundation 工 具 进 行 Nutanix 集 群 的 初始 部 署 时 ，Foundation 将 按照 设 定 自动 进行 安装 所 需 的 虚拟 化 平台 、 部 署 CVM、 配 置 网 络 、 创 建 网 络 虚 拟 交换 机 、 连 接 存 储 等 工作 。 当 
Foundation 任 务 完成 之 后 ， 集 群 就 已 经 具备 了 投产 使 用 的 能 力 。 


在 未 进行 特殊 配置 的 情况 下 ， 交 换 机 的 网 络 接口 默认 被 划分 到 VLAN 0 网 络 。 但 是 在 很 多 环境 里 ， 网 络 管理 员 需 要 将 服务 器 放置 在 非 零 的 VLAN 当 中 ， 如 图 6-38 所 示 ，AHV 主 机 及 CVM 默 认 
未 配置 VLAN 标 签 (使 用 的 是 VLAN O) ， 因 此 我 们 需要 手工 修改 虚拟 化 主机 及 CVM 的 网 络 配置 。 


AHV 和 ESXi 的 VLAN 配 置 略 有 不 同 ， 下 面 将 分 别 进 行 介 绍 。 
6.6.2.1 AHV 的 VLAN 配 置 修改 
: AHV 主 机 


在 AHV 环 境 里 ， 我 们 需要 修改 每 个 AHV 主 机 以 及 所 有 CVM 的 VLAN 网 络 ， 我 们 需要 使 用 SSH 方 式 登 录 到 每 台 AHV 主 机 上 ， 然 后 执行 以 下 命令 操作 。 


VM1 VM2 
VLAN: 101 VLAN: 102 


Controller VM 


User VM1 
VLAN: 101 


User VM2 
VLAN: 102 


Controller VM 
VLAN: 10 


Switch Trunk Ports 
VLAN: 0 (Untagged) 


101, 102 
Physical Physical Physica 
Switch 1 Switch 2 Switch 1 
图 6-38 AHV 和 CVM 的 Native VLAN 示 意图 
root@ahv# ovs-vsctl set port br0 tag=VLANID 


root@ahv# ovs-vsctl list port bro 


Switch Trunk Ports 
VLAN: 10, 101, 102 


Switch 2 


: CVM VLAN 修 改 
CVM 虚 拟 机 内 提供 了 change_cvm_vlan 的 命令 用 于 修改 命令 VLAN。 我 们 可 以 通过 以 下 命令 来 完成 。 


nutanix@cvm$ change cvm vlan VLANID 


四 
e. 修改 CVM VLAN 时 ， 为 了 防止 因为 修改 VLAN 而 导致 网 络 连接 中 断 ， 可 以 在 连接 到 AHV 主 机 之 后 ， 通 过 CVM 的 内 部 JP 地 址 192.168.0.254 来 进行 CVM 网 络 配置 的 修改 。 即 连接 到 
AHV 主 机 上 通过 ssh nutanix(@192.168.0.254 修 改 对 应 的 CVM 的 VLAN ID. 
6.6.2.2 ”vSphere 的 VLAN 配 置 修改 
- ESXi = Jt 


与 AHV 类 似 ， 无 论 是 手工 还 是 通过 Foundation 自 动 化 完成 ESXi 的 部 署 ，VMware 默 认 的 管理 网 络 属于 VLAN 0， 我 们 可 以 登录 到 ESXi 主 机 控制 台 (显示 器 连接 或 通过 IPM|I 方 式 连 接 ) 上 直 
接 修 改 管理 网 络 的 VLAN ID， 如 图 6-39 所 示 。 


VLAN Copt ional) 


If you are unsure how to configure or use a VLAN, it is safe to 
leave this option unset. 


VLAN ID (1-4094, or 4095 to access all VLANs): 


图 6-39 ESXi 主 机 的 VLAN 配 置 


: CVM VLAN £C 


修改 完 ESXi 主 机 的 VLAN ， 我 们 还 需要 对 CVM 的 VLAN 网 络 进行 修改 。 我 们 可 以 通过 vSphere Client 连 接 到 vCenter Server 或 者 直接 连接 到 ESXi 主 机 上 修改 VM Networki 148889 VLAN ID 
配置 ， 如 图 6-40 所 示 。 
49) vSwitchÜ Properties E 28 


! J | 
| (B VM Network Propertic BW ama e 
Ports | Network Adapters | 


| Configuration | Summa General | Security | Traffic Shaping | NIC Teaming | 
$f vSwitch 120Po Port Group Properties 

六 VM Network Virtual 
@  ManagementNet.. vMotia Network Label: vm Network 


VLAN ID (Optional): 10 ~ 


图 6-40 虚拟 网 络 VLAN 修 改 


6.6.2.3 ”Hyper-V 的 VLAN 配 置 修改 


: CVM VLAN 修 改 


1. 通 过 IPMI 控 制 台 或 连接 显示 器 和 键盘 到 Nutanix 节 点 上 。 


2. 开 启 PowerShell,， 执行 下 面 的 命令 ， 查 找 CVM 的 名 称 并 设置 成 变量 $cvm: 


Scvm = Get-VM | Where {$ .Name -match 'NTNX.*CVM'"'} 


3. 执 行 下 面 命 令 ， 修 改 CVM 的 VLAN ID: 


Set-VMNetworkAdapterVlan -VMName $cvm.name -Access -VlanId VLANID VMNetwork-AdapterName External] 


: Hyper-V i. 机 VLAN 修 改 
1. 通 过 IPMI 控 制 台 或 连接 显示 器 和 键盘 到 Nutanix 节 点 上 。 


2. 开 局 Powershell， 执 行 下 面 的 命令 修改 Hyper-V 主 机 的 VLAN ID: 


Set-VMNetworkAdapterVlan -ManagementOS -Access -VlanId VLANID VMNetworkAdapterName 
ExternalSwitch 


6.6.2.4 XenServer 的 VLAN 配 置 修改 


上 文 已 经 介绍 了 AHV、vSphere、Hyper-v 这 三 种 Hypervisor 上 如 何 修改 主机 和 CVM 的 VLAN ID， 除 了 上 述 通 过 修改 Hypervisor 的 方式 来 修改 VLAN ID 之 外 ， 管 理 员 也 可 以 通过 修改 物理 网 
络 交换 机 对 应 超 融 合 节点 的 接口 来 完成 Native VLAN 的 修改 。 


我 们 以 思科 的 交换 机 为 例 ， 管 理 员 可 以 通过 在 交换 机 的 接口 模式 下 配置 Native VLAN， 配 置 命令 如 下 : 


switch (config-int)# switchport trunk native vlan 10 


通过 上 述 命令 行 我 们 就 已 经 将 交换 机 接口 的 Native VLAN 改 为 VLAN 10， 连 接 到 这 个 接口 上 的 主机 和 CVM 将 自动 继续 这 个 VLAN ID, 


说 明 修改 交换 机 Native VLAN 的 方法 可 以 适用 于 任何 的 Hypetvisoft， 可 以 节省 管理 员 修 改 主 机 和 CVM 的 VLAN 的 操作 步骤 。 


6.6.3 ”CVM 内 存 配 置 修改 


当 使 用 Nutanix Foundation 工 具 进 行 集群 部 署 时 ，CVM 虚 拟 机 将 按照 管理 员 的 设 定 进 行 自动 配置 。 当 因为 工作 负载 变化 ， 如 从 运行 VDI 变 为 运行 数据 库 负载 时 ， 管 理 员 可 以 参考 4.1.4.1 节 
中 天 于 各 类 工作 负载 的 CVM 内 存 需求 来 分 配 CVM 所 需 的 内 存量 。 


6.6.3.1 AHV/ESXI 的 CVM 内 存 配 置 修改 


在 Prism 控 制 台 中 提供 了 图 形 化 方式 修改 CVM 内 存 的 配置 ， 管 理 员 可 以 通过 配置 菜单 中 的 Configure CVM 功 能 完成 CVM 内 存 的 修改 ， 如 图 6-41 所 示 。 


^L] 


|| 


Prism 配置 菜单 


V 之 里 A V ane 分 Bj B. INi V Bj y 了 V 
点 击 了 E -人 


CVM 的 内 存 。 


Memory Size 


TARGET CVM MEMORY ALLOCATION 


32 GB b dl 
DETAILS 

NTNX-115M15380048-A-C VM 10.132.68.41 NX-1050 2B 

NTNX-115M15380048-C -C VM 10132.68.43 NX-1050 2B 

NTNX-115M15380048-B-CVM 10132. 68.42 NX-1050 2B 

NTNX-145M15380048-D-C VM 10132. 68.44 NX-1050 2B 


0 Prism 控 制 人 台中 修改 CVM 内 存 的 方式 目前 仅 适 用 于 AHV 和 ESXi 为 Hypervisot 的 Nutanix 集 群 ， 如 果 需 要 对 Hyper-V 和 XenServer 进 行 CYM 内 存 的 修改 ， 可 参见 6.6.3.2 节 和 6.6.3.3 节 。 


图 6-42 CVM 内 存 修改 界面 


6.6.3.2 ”Hyper-v 的 CVM 内 存 配 置 修改 


1) 使 用 SSH 工 具 登 录 到 CVM 中 。 


2) 使 用 以 下 命令 关闭 CVM : 


nutanix@cvm$ cvm shutdown -P now 


3) 使 用 远程 桌面 登录 到 Hyper-V 主 机 并 使 用 下 面 的 PowerShell 命 令 来 增加 CVM 内 存 。 


set-VMMemory cvm name -DynamicMemoryEnabled s$true -MinimumBytes size in MBMB -StartupBytes size in MBMB -MaximumBytes size in MBMB -Priority 80 -Buffer 25 


四 
Oy. 替换 以 上 命令 中 的 cvm_name 为 真实 的 CVM 虚 拟 机 名 称 ， 蔡 换 size_in_MB 为 CVM 虚 拟 机 的 内 存 容量 。 


4) 使 用 以 下 命令 启动 CVM。 


start-vm *ntnx* 


5) 使 用 SSH 工 具 登 录 到 CVM。 


6) 使 用 cluster status 命 令 检 查 CVM 的 所 有 服务 状态 均 为 up。 


nutanix@cvmS cluster status 


Qi 在 进行 CVM 内 存 配 置 修 改 时 ， 为 了 防止 对 于 集群 可 用 性 的 影响 ， 请 同时 仅 关 闭 一 台 CVM， 并 在 CVM 的 集群 服务 变 成 bp 状态 后 再 修改 下 一 台 CVM。 


6.6.3.3 ”XenServer 的 CVM 内 存 配置 修改 


对 于 XenServer 上 的 CVM 内 存 修改 ， 可 以 使 用 以 下 方式 完成 CVM 内 存 的 修改 。 
1) 使 用 SSH 工 具 登 录 到 CVM 中 。 


2) 使 用 以 下 命令 关闭 CVM : 


nutanix@cvm$ cvm shutdown -P now 


3) 使 用 SSH 工 具 登 录 到 XenServer 主 机 进行 操作 。 


a) 通过 以 下 命令 查询 CVM 主 机 的 UUID: 


user@host$ xe vm-list 


b) 使 用 以 下 命令 修改 CVM 的 内 存 : 


user@host$ xe vm-memory-limits-set uuid=UUID of CVM static-min=memory in GiB dynamic-min=memory in GiB dynamic-max=memory in GiB static-max=memory in GiB 


加 
©; 明 替换 以 上 命令 中 的 UUID_of_CVM 为 真实 的 CVM 虚 拟 机 UUID， 蔡 换 memory_in_GiB 为 CVM 虚 拟 机 的 内 存 容量 。 


c) 使 用 以 下 命令 局 动 虚拟 机 


user@hostS systemctl start nutanix-cvm 


4) 使 用 SSH 工 具 登 录 到 CVM。 


5) 使 用 以 下 命令 检查 CVM 的 所 有 服务 状态 均 为 up。 


nutanix@cvmS cluster status 


Qi 不 建议 管理 员 在 CVM 中 执行 任何 未 在 Nutanix 官 方 文档 中 明确 表示 为 可 操作 的 命令 和 操作 。 


6.6.4 ”主机 操作 与 管理 


6.6.4.1 IPMI 功 能 介绍 


超 融 合集 群 采 用 分 布 式 架构 ， 在 可 容忍 数量 的 组 件 失效 的 情况 下 (可 以 是 硬件 故障 、 节 点 故障 ， 甚 至 是 机 箱 故 障 ) ， 集 群 仍然 可 以 正常 工作 。 


在 节点 出 现 系统 或 物理 故障 的 情况 下 ， 管 理 员 需 要 对 其 进行 问题 定位 、 排 错 。Nutanix 在 所 有 型 号 的 超 融 合 节点 均 配置 了 IPMI| (Intelligent Platform Management Interface， 智 能 平台 
管理 接口 ) 接口 ， 通 过 IPMI 技 术 ， 管 理 员 不 需要 走 进 数据 中 心 就 可 以 进行 故障 处 理 和 排 错 。 


IPMI 作 为 通用 的 硬件 管理 标准 得 到 了 诸多 硬件 和 软件 厂商 的 支持 ， 用 户 可 以 利用 |PM | 监视 服务 器 的 物理 健康 特征 ， 如 温度 、 电 压 、 风 扇 工 作 状态 、 电 源 状态 等 。IPMI 的 核心 是 BMC (基板 
管理 控制 器 ) ， 并 不 依赖 于 服务 器 的 处 理 器 、BIOS 或 操作 系统 来 工作 。BM(C 是 一 个 单独 在 系统 内 运行 的 无 代理 管理 子 系统 ，BMC 人 允许 管理 员 通过 网 络 直接 进行 远程 的 带 外 管理 ， 而 无 论 
Hypervisor 是 否 可 以 正常 工作 。 


在 Nutanix 集 群 的 初始 部 署 过 程 中 ，Nutanix Foundation 工 具 通 过 IPM| 接 口 进行 自动 的 ISO 挂 载 和 系统 安装 。 在 Prism 控 制 人 台中 也 可 以 通过 IPM| 直 接 进 行 主机 的 管理 。 如 图 6-43 所 示 ， 管 理 
员 可 以 直接 在 Prism 控 制 台 的 硬件 管理 界面 中 ， 显 示 IPMI 管 理 的 链接 。 


127.97 


POCO40-3 10.21.40.27 10.21.40.31 ESXi 8.82% 23.99 GHz 27.57% = 2113 GiB of 3.41 TIB 0.61% 3 54 KBps 0.23 ms 
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Node Serial ZM14C 5047202 


Memory Usage 
图 6-43 ”Prism 控制 台中 进行 硬件 管理 


通过 图 6-43 中 列 出 的 IPMI IP 地 址 ， 管 理 员 可 以 打开 BMC 控 制 台 。 在 BMC 控 制 台 中 ， 管 理 员 可 以 完成 日 常 对 主机 的 电源 控制 操作 如 关机 、 开 机 、 重 置 等 ， 如 图 6-44 所 示 。 


Host Identific atio 
Server: 010.132.070.027 
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图 6-44 ”电源 控制 


此 外 ， 管 理 员 也 可 以 通过 BMC 控 制 台 进 行 控制 台 重 定向 操作 ， 如 图 6-45 所 示 ， 管 理 员 可 以 直接 对 超 融 合 节点 上 的 ESXi 控 制 台 进 行 远程 操作 .。 


NUTAND< 


Server Health 


Host Identificatio 
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User: ADMIN 


@ Normal@)Refresh@Logout English | 
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Configuration Remote Control Virtual Media Maintenance Miscellaneous 


© Remote Control : C Console Redirection 
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© Console Redirection 
Press the button to launch the 


© Power Control 
i VMware ESXi 6.0.0 (VMKernel Release Build 3620759) 
e Launch SOL : Nutanix NX 


Launch Console 2 x Intel(R) Xeon(R) CPU E5-2620 8 @ 2.00GHz 
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图 6-45 “通过 IPMI 进 行 控制 台 操 作 


通过 BM 人 控制 台 ， 管 理 员 也 可 以 对 节点 使 用 的 电量 进行 监测 ， 如 图 6-46 所 示 ， 列 出 了 该 节点 的 平均 、 最 小 、 最 大 电量 消耗 。 管 理 员 可 以 参考 给 出 的 统计 数据 来 进行 数据 中 心 物 理 机 架设 
计 ， 提 高 数据 中 心 的 利用 率 。 


6.6.4.2 BMC 地 址 配置 与 修改 


上 节 介 绍 了 IPMI 的 功能 ， 接 下 来 将 介绍 IPMI 的 配置 。 管 理 员 如 果 希 望 远 程 进行 IPMI 的 管理 ， 就 需要 首先 给 IPMI 接 口 设 定 BMC IP 地址。 可 以 通过 以 下 的 方式 来 设 定 BMC 1IP 地 址 。 


NUTANIX. 


System Server Health Configuration Remote Control Virtual Media Maintenance Miscellaneous 


Host Identificatio 
Server: 010.132.070.021 


User: ADMIN 


@ Normal@)RefreshG@Logout English — v | 


( Administrator ) 


Power consumption graph and history 


© Server Health 


: = Power Statistics Last Hour + Time Past 24 Hr Time + Past 7 days 
e Sensor Readings ; ND Average (W) 438 N/A 435 N/A 393 
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图 6-46 ”电量 监测 


: BIOS BG E BMC H) 2&- 


理 员 可 以 通过 BIOS 直 接 修改 IPMI 的 设 定 ， 如 图 6-47 所 示 ， 管 理 员 为 BIO 设置 了 IP 地 址 、 子 网 掩 码 、 网 天 等 信息 。 
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图 6-47 IPMLAEBIOS v HAE 
` IPMI 命 令 行 
在 AHV/ESXi 系 统 中 内 置 了 IPMITOOL 工 具 ， 通 过 这 个 工具 ,管理 员 可 以 直接 进行 IPMI 的 配置 和 操作 。 以 修改 BMC 接 口 的 IP 地 址 、 子 网 掩 码 和 网 关 为 例 来 介绍 IPMITOOL 工 具 的 使 用 。 


通过 SSH 工 具 登 录 到 AHV/ESXi 主 机 ， 可 以 执行 以 下 的 命令 来 修改 相关 信息 : 


ipmitool -U ADMIN -P ADMIN lan set 1 ipsrc static (设置 为 分 配 静 态 IP 地 址 ) 
ipmitool lan set 1 ipaddr IP 地 址 (设置 IP 地 址 ) 
ipmitool lan set 1 netmask jin CON EIPMIT MER) 

ipmitool lan set 1 defgw ipaddr IP 地 址 (设置 IPMI 网 关 地 址 ) 


在 主机 上 操作 的 结果 如 图 6-48 所 示 。 
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图 6-48 IPMITOOL #4 4% M 


管理 员 也 可 以 通过 IPMITOOL 直 接 输出 当前 主机 的 IPMI 配 置 。 如 图 6-49 所 示 ， 当 执行 jpmitool-v-U ADMIN-P ADMIN lan print 1 命令 后 ， 系 统 将 显示 当前 的 |PM| 配 置信 息 。 
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图 6-49 IPMITOOL# 3 :5 ay B5 
在 Hyper-V 系 统 中 可 以 使 用 ipmiutil 工 具 进行 |PMI 配 置 的 修改 ， 命 令 行 格式 为 : 


ipmiutil lan -I IP 地 址 -G 网 关 地址 -S TEI -U ADMIN -P ADMIN 


可 以 通过 ipmiutil lan-r-U ADMIN-P ADMIN 命 令 查看 当前 |PM| 配 置 。 
: BMC 控 制 台 
在 BMC 控 制 台中 提供 了 基于 Web 的 方式 来 修改 BMC 地 址 设置 。 如 图 6-50 所 示 ， 管 理 员 可 以 在 Configuration 下 的 Network 中 修改 IP 地 址 信息 。 
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© Network 2 Subnet Mask 255.255.252.000 
© Dynamic DNS : Gateway 010.132.068.004 
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图 6-50 ”IPMI 控 制 台 修改 IPMI 地 址 信息 
: SuperMicto 服 务 器 管理 工具 


SuperMicro 提 供 了 一 系列 的 管理 工具 用 于 服务 器 的 管理 ， 借 助 这 些 工 具 ， 管 理 员 可 以 进行 统一 的 电源 管理 、 监 控 、BIOS 配 置 等 。 图 6-51 列 出 了 SuperMicro 提 供 的 服务 器 管理 工具 。 
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图 6-51 SuperMicro 服 务 器 管理 工具 


IPMI View 是 由 SuperMicro 提 供 的 一 个 IPM1 管 理工 具 ， 通 过 这 个 图 形 化 工具 ， 管 理 员 可 以 更 加 直观 地 进行 PMI 操作， 相 比 Web 版 本 的 BMC 控 制 台 方式 ，IPMI1 View 操 作 起 来 更 加 方便 快 
捷 。 如 图 6-52 所 示 ， 管 理 员 可 以 将 多 个 主机 加 入 IPMI View 控 制 台 进行 IPM1 相 关 操 作 ， 如 电源 管理 、 控 制 台 、IPMI1 IP 地 址 修改 。 


lU IPMI View 2.13.0 (build 170504) - Super Micro Computer, me - Sra 
档案 编辑 25 管理 帮助 
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e 


IP 地 址 10 132. 70. 网 络 MAC 00:25:90: F7:62:11 更 新 
maki IP |10.132. 68. [E] DHCP 
FARA 255 
VLAN Tag [E] Enable VLAN tagging 
W. 10.132. 70.33 VEO pun 更 新 
RERE aau ET 


10. 132. 70. 43 


WÜ 10.132. 70. 42 
a 


| 


| 一 


LAN Interface 


的 Dedicated © On Board LANI Q Failover 


读 取 ACPI 电源 状态 成 功 


图 6-52 IPMI View 界 面 


用 户 可 以 在 SuperMicro 官 网 https://www.supermicro.org.cn/products/nfo/Management-Software.cfm 下 载 这 些 软 件 。 


Nutanix 集 群 内 的 各 组 件 均 提 供 了 日 志 记录 功能 ， 但 组 件 的 日 志 存 放 的 位 置 不 同 ， 管 理 员 可 以 通过 syslog 方 式 将 日 志 集中 到 专用 的 syslog 日 志 服 务 器 上 。 通 过 syslog 日 志 ， 管 理 员 可 以 更 加 
方便 地 进行 日 志 的 查询 、 分 类 、 统 计 。 


Nutanix 集 群 默认 已 经 开局 远程 syslog 服 务 器 功能 ， 管 理 员 可 通过 添加 syslog 服 务 器 等 参数 来 收集 Nutanix 集 群 的 日 志 。 


通过 SSH 工 具 连 接 到 CVM， 进 入 nCLI 模 式 ， 添 加 syslog 服 务 器 信息 ， 命 令 行 如 下 : 


nutanix@CVMS ncli 
ncli» rsyslog-config add-server ip-address=IP 地 址 name= 名 称 Port= 端 口号 networK- 
Protocol= 协 议 类 型 


以 一 个 示例 来 演示 真实 操作 时 的 命令 ， 如 图 6-53 所 示 。 


10.132.68.45 - PuTTY EEREES 


ix@NTNX-145M15380048-B-CVM:10.132.68.42:~$ ncli ^ 


D = F3 33m 
iD1qgu.r1oud- 


syslog-config 


— y ot el 


图 6-53 ftsyslog 添 加 服务 器 示例 


执行 完 上 述 命令 之 后 ， 可 以 通过 执行 rsyslog-config list 命 令 来 查询 配置 ， 如 图 6-54 所 示 。 


10.132.68.45 - PuTTY [5 l © Jm 
a 
rsyslog-config 
'yslog-config 
rsyslog-config 
Name 
IP Address 


图 6-54 ”执行 rsyslog-config list 命 令 来 查询 配置 


添加 完 syslog 服 务 器 的 信息 之 后 ， 还 需要 指定 转 帮 的 日 志 类 型 和 日 志 级 别 ， 仍 然 使 用 rsyslog 命 令 来 操作 ， 格 式 如 下 。 


ncli» rsyslog-config add-module server-name= 名 称 level= 日 志 级 别 module-name= 日 志 类 型 名 称 


示例 如 图 6-55 所 示 。 


add-module ' name-suys | WFO module-na 


K6-55 ” ”Syslog 添加 日 志 类 型 示例 


通过 以 上 配置 ， 在 Syslog 服 务 器 端 将 接收 到 相关 的 日 志 ， 如 图 6-56 所 示 。 


Kiwi Syslog Service Manager (Free Version 9.6) o] -E-E 
File Edit View Manage Help 
四 fi) 总 [Display 00 (Default) ~| > Compare features of the free and licensed versions 
Date Time Priority Hostname | Message ^ 


07-11-2017 13:20:34 Localü Info 10.132.68.42  2017-07-11T13:20:34. 0111064 08-00 NTNX-145H15380048-B-CYH prism. gateway: INFO 2017-07-11 13:20:31,431 http-nio-127 0.0: 1-3081-exec-1 
prism. util. Utils. executeCommand: 473 Executing command executable /usr/bin/sudo 


07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20-34.011103408-00 NTNX-145H15380048-B-CYH prism. gateway: INFO 2017-07-11 13:20:31,430 http-nio-127 0.0. 1-9081-exec-1 
cluster. administration. E xecuteCommand. doE xecute:151 Command /usr/bin/sudo cat /home/private/gen. server key succeeded 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20-34.011100408-00 NTNX-145H15380048-B-CYH prism. gateway: INFO 2017-07-11 13:20:31,418 http-nio-127 0.0. 1-3081-exec-1 
cluster. administration. E xecuteCommand. doE xecute:141 Executing: /"usr/bin/sudo cat /home/private/gen. server key 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20-34.011097408-00 NTNX-145H15380048-B-C'YHM prism. gateway: INFO 2017-07-11 13:20:31,409 http-nio-127 0.0. 1-3081-exec-21 
com.nutanix. syslog. generate5 yslog: 16 An unsuccessful login attempt was made with username: admin from IP: 10.132. 71.62 and browser: null 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20:34.011033408-00 NTNX-145H15380048-B-CvM prism. gateway: ERROR 2017-07-11 13:20:31,408 http-nio-127.0 0. 1-3081-exec-21 
commands. auth. Crypt&uthenticationProvider. additional&uthenticationChecks:50 User should be authenticated against OS user account 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20-34.011090408-00 NTNX-145H15380048-B-C'YH prism. gateway: INFO 2017-07-11 13:20:31,397 http-nio-127 0.0. 1-39081-exec-21 
prism. util. Utils. executeCommand: 473 Executing command executable /usr/bin/sudo 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20:34.011087408-00 NTNX-145H15380048-B-CvM prism. gateway: ERROR 2017-07-11 13:20:31,397 http-nio-127. 0. 0.1-3081-exec-21 
commands. auth. PAMAuthenticationProvider. authenticate: 1465 Incorrect username or password. 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20:34.011084408-00 NTNX-145H15380048-B-CYH prism. gateway: INFO 2017-07-11 13:20:31,397 http-nio-127 0.0. 1-9081-exec-21 
prism. util AdminPasswordlltil. authenticateAgainstPAM:317 PAM Status Code : 6 

07-11-2017 13:20:34  LocalÜ Info 10.132.68.42 2017-07-11T13:20-34.011081-408-00 NTNX-145H15380048-B-CYHM prism. gateway: INFO 2017-07-11 13:20:30,834 http-nio-127 (0.0. 1-3081-exec-22 
prism. util. Utils. executeCommand: 473 Executing command executable /usr/bin/sudo 


100% | 22K MPH 13:20 | 07-11-2017 


W 


图 6-56 syslog 接 收 日 志 示 例 


管理 员 可 以 通过 rsyslog 命 令 来 开启 或 关闭 syslog 的 功能 ， 如 果 管 理 员 需要 关闭 rsyslog 功 能 ， 可 以 通过 rsyslog-config set-status enable=false 命 令 来 关闭 ; 如 果 需 要 开启 rsyslog 功 能 ， 可 


以 通过 rsyslog-config set-status enable=true 命 令 开启 。 


Qi 关于 日 志 类 型 以 及 日 志 级 别 的 详细 介绍 ， 可 以 参考 Nutanix 提 供 的 《Acropolis Advanced Administration Guide» 官方 文档 。 


6.6.6 合 规 性 官 理 与 软件 升级 
随 着 数据 中 心 规模 的 扩展 ， 数 据 中 心里 将 出 现 越 来 越 多 的 计算 和 存储 设备 。 这 些 计算 和 存储 设备 品牌 、 型 号 、 软 件 版 本 、 硬 件 固件 各 不 相同 ， 这 对 于 管理 员 的 日 常 管理 、 维 护 都 带 来 了 不 少 
的 挑战 


在 超 融 合集 群 里 ， 包 含 了 超 融 合集 群 运行 的 软件 以 及 支撑 软件 运行 的 硬件 ， 软 件 功能 的 提升 可 以 通过 软件 升级 更 新 完成 ， 但 是 很 多 的 软件 功能 也 依赖 于 硬件 的 支持 ， 因 此 硬件 厂商 (如 磁盘 
控制 器 、BMC、 网 卡 等 ) 也 会 定期 发 布 硬件 的 固件 〈 主 要 用 于 功能 升级 、 性 能 提升 等 ) 。 


此 外 ， 与 单纯 的 虚拟 化 系统 相 比 ， 超 融合 系统 里 还 需要 提供 存储 的 能 力 ， 对 于 存储 组 件 而 言 ， 性 能 和 可 靠 性 都 全 关 重 要 ， 这 也 依赖 于 超 融合 软件 和 固件 的 版 本 管理 和 升级 。 如 果 在 集群 里 ， 
各 节点 之 间 的 软件 、 固 件 版 本 不 统一 ， 就 可 能 会 影响 集群 的 稳定 性 甚至 导致 数据 的 丢失 。 


在 Nutanix 系 统 里 ， 提 供 了 软件 升级 的 功能 ， 管 理 员 可 以 通过 此 功能 来 实现 Nutanix 软 件 、Hypervisor、 硬 件 固件 的 一 键 式 升级 ， 如 图 6-57 所 示 。 


Acropolis - Hypervisor - Firmware - NCC - Foundation 


4.7.3.2 


Upgrading Acropolis 8276 | 


lec close ME 


Upgrading CVM 10.21.40.31 73x | 


St open 


Upgrading CVM 10.21.40.30 100% 


Nothing to do? 


图 6-57 Nutanix 提 供 的 一 键 式 升级 功能 
软件 升级 功能 可 以 帮助 管理 员 针 对 单个 组 件 进 行 升级 ， 在 升级 的 过 程 中 ， 系 统 将 自动 移动 虚拟 机 (使 用 在 线 迁移 技术 ) ， 然 后 逐个 升级 节点 ， 从 而 不 影响 虚拟 机 的 正常 运行 。 


但 是 在 升级 前 ， 管 理 员 有 必要 对 各 个 节点 上 运行 的 软件 版 本 、 硬 件 的 固件 版 本 进行 查询 ， 举 例 来 说 ， 管 理 员 计划 将 集群 软件 AOS 从 4.7 版 本 升级 到 5.0 版 本 ， 在 进行 AOS 升 级 之 前 束 需 要 对 各 
个 节点 上 的 虚拟 化 软件 、 硬 件 固 件 版 本 进行 统一 了 解 、 升 级 ， 以 满足 新 的 AOS 版 本 对 相关 组 件 版 本 的 要 求 ， 以 防止 升级 过 程 失 败 对 业务 造成 影响 。 


Nutanix 提 供 的 生命 周期 管理 组 件 Life Cycle Management (简称 LCM) 作为 合 规 性 管理 解决 方案 可 以 有 效 地 解决 上 述 困难 ， 管 理 员 通过 合 规 性 管理 进行 日 常 的 检查 ， 发 现 各 个 设备 内 的 软 


件 、 固 件 的 版 本 情况 ， 并 可 以 通过 LCM 进 行 统一 的 升级 。 管 理 员 可 以 通过 配置 菜单 中 的 Life Cycle Management 功 能 (如 图 6-58 所 示 ) ， 针 对 超 融合 节点 中 的 BIOS、BMC、 磁 盘 控 制 器 、 网 
、 磁 盘 以 及 Nutanix 集 群 软件 和 虚拟 化 系统 组 件 进行 定期 的 版 本 检查 ， 并 可 批量 执行 相关 组 件 的 升级 工作 ,减少 手工 作业 的 复杂 度 以 及 出 错 率 。 


zh 


Life Cycle Management ? x 
Available Updates Inventory oor 

BIOS BMCs Cluster Software Component 
See All See All See All 

Cluster Software Components HBAs Hypervisor 
See All See All See All 

NICs SATA Drives 
See All See All 


图 6-58 LCM 


相 比 人 工 对 多 个 节点 逐个 检查 、 升 级 的 方式 ，LCM 方 案 可 以 统一 地 实现 版 本 检查 、 管 理 和 升级 ， 不 再 担心 个 别 组 件 因 为 人 员 政 忽而 饼 记 升级 ， 将 管理 员 从 重复 和 正 碎 的 事物 中 解放 出 来 。 
图 6-59 所 示 ， 管 理 员 可 以 对 节点 的 HBA (磁盘 控制 器 ) 的 固件 版 本 进行 检查 。 


LS! Logic 5452008 HBA - 1 


LS! Logic 5452008 HBA - 1 


LSI Logic 5452008 HBA - 1 


图 6-59 ”磁盘 控制 器 版 本 检查 


此 外 ， 在 进行 软件 升级 前 ， 管 理 员 可 以 通过 Nutanix 提 供 的 升级 路 径 以 及 兼容 矩阵 来 了 解 当前 集群 中 的 软件 版 本 是 否 与 计划 升级 的 版 本 兼容 。 


如 


Oe 可 以 通过 以 下 网 址 获取 最 新 的 信息 : 
升级 路 径 : https://portal.nutanix.com/#/page/static/upgradePaths 


- 兼容 矩阵 : https://portal.nutanix.com/#/page/compatibilitymatrix 


6.6.7 ”监控 与 警报 


Nutanix 集 群 根 据 RF 设 置 可 以 容忍 不 同 数量 级 别 的 组 件 故 障 产生 ， 但 是 行 忆 有效 的 监控 和 报警 机 制 可 以 在 相关 组 件 发 生 故障 的 第 一 时 间 融 通知 管理 员 ， 以 便 采 取 相 天 的 措施 对 组 件 进行 修 


以 三 个 节点 的 最 小 规模 集群 为 例 ， 当 节 点 发 生物 理 故 障 ( 即 只 有 两 个 健康 节点 和 一 个 故障 节点 ) 的 情况 下， 集群 将 继续 运行 ， 而 且 不 会 造成 业务 中 断 ， 故 障 节点 上 运行 的 虚拟 机 会 通过 庶 拟 
化 系统 的 HA 机 制 自动 地 在 其 他 节点 上 重新 开机 运行 ， 原 来 这 个 节点 上 保存 的 数据 会 在 集群 中 的 健康 节点 上 进行 重建 保护 (前提 是 两 个 节点 上 均 有 足够 的 存储 空间 ) 。 在 修复 现 有 节点 的 问题 
(如 替换 坏 掉 的 局 动 盘 ) 前 ， 如 果 再 出 现 一 个 节点 的 故障 ， 集 群 中 数据 及 虚拟 机 将 不 能 受到 保护 。 因 此 在 这 个 情况 下 ， 管 理 员 第 一 时 间 收 到 报警 通知 并 着 手 进 行 修 复 是 必要 的 手段 。 


Nutanix 集 群 功能 里 提供 了 一 系列 的 监控 报警 手段 ， 可 以 让 管理 员 了 解 相关 的 故障 。 常 见 的 报警 方式 有 网页、 邮件 、SNMP 网 管 软件 。 


在 Prism 界 面 中 提供 了 警报 功能 (Alert) ， 可 以 允许 管理 员 在 GUI 界 面 中 直接 了 解 报警 信息 ， 管 理 员 可 以 了 解 到 受 影 响 的 组 件 、 发 生 的 时 间 等 信息 ， 如 图 6-60 所 示 。 


er «| Unresolved X wv | - B Alerts mae 


SEVERITY ISSUE TIMESTAMP ACKNOWLEDGED RESOLVED ENTITIES DOCUMENTATION 
© Critical Failed to send email from Controller VM 10.21.40.30 via SMTP server 10.21.40.30:2525 due to 06/27/17. Cluster Cause , 
ritica 
following error : Connection refused. 9:47:04 AM , Host Resolution 
06/27/17, Cause : 
@ Critical Controller VM 10.21.40.29 has been rebooted on Mon Jun 26 18:37:00 2017. Host Pd 
9:46:06 AM Resolution 
= e Critical Failed to send email from Controller VM 10.21.40.29 via SMTP server 10.21.40.29:2525 due to 06/27/17. Cluster Cause 9 
| ritica 
following error : Connection refused. 9:33:03 AM , Host Resolution 
Q i 06/27/17. Cause : 
f Stargate on Controller VM 10.21.40.31 is down for 318 seconds. Host Pd 
Warning 9:32:37 AM Resolution 
© Critical Failed to send email from Controller VM 10.21.40.31 via SMTP server 10.21.40.29:2525 due to 06/277. Cluster Cause A 
ritica 
following error : Connection refused. 9:24:08 AM , Host Resolution 
D . 06/27/17. Cause : 
: Stargate on Controller VM 10.21.40.30 is down for 319 seconds. Host Pd 
Warning 9:23:52 AM Resolution 
— D Wall clock time has drifted by more than 3 seconds between the Controller VMs 10.21.40.30 and 06/27/17, 8:46:41 Cluster Cause , 
Warning 10.21.40.29. AM > Resolution 
@ i . : 06/27/17, 8:37:18 Cause 
. Features not permitted by Starter license are being used. Cluster 
Warning AM Resolution 


图 6-60 Prism? 4g 3&3R 3t v 


对 于 计划 内 的 系统 维护 产生 的 已 知 报警 信息 (如 AOS 软 件 升 级 过 程 会 重启 部 分 集群 组 件 的 服务 ) ， 管 理 员 可 以 通过 选中 相关 警报 信息 点 击 Acknowledge 按 钮 确认 ， 对 于 已 经 解决 的 问题 ， 
管理 员 可 以 通过 Resolve 按 钮 确认 已 经 解决 ， 如 图 6-61 所 示 。 


uh 


| | 3 of 8 rows selected. Se IS rows. | selection. | Acknowledge Resolve 
Event f lected lect all 8 rows. Clear selection | Ig Hesolve | 


图 6-61 警报 处 理 


针对 不 同 的 工作 负载 、SLA 级 别 对 于 系统 报警 的 要 求 也 不 相同 ，Prism 中 人 允许 管理 员 修 改 报警 策略 ， 管 理 员 可 以 通过 报警 策略 来 设置 适合 自身 的 报警 要 求 ， 如 图 6-62 所 示 。 


Alert Policies ? X 


A103073 CVM Not Uplinked to Active 10Gbps System Indicator Host Default "d 
Link 
A103076 Incorrect NTP Configuration System Indicator Host Default Pd 
A103088 CVM is unreachable System Indicator Host Default "d 
A1031 System Partitions Space Usage High Availability Host Default Pd 
A1032 CVM Services Restarting Frequently System Indicator Host Default "d 
A1033 VM Action Error Availability Cluster Default "d 
A1034 Kernel Memory Usage High System Indicator Host Default "d 
A1037 Metadata drive failed System Indicator Host Default p 
A1038 Duplicate Remote Cluster ID Availability Remote Site Default "d 
A1043 Protection Domain Activation Availability Protection Domain Default pF 


图 6-62 警报 策略 设置 


如 果 和 希望 通过 邮件 方式 获取 报警 信息 以 及 每 日 报警 摘要 ， 则 可 通过 Nutanix 提 供 的 报警 邮件 配置 实现 ， 管 理 员 可 以 设置 接受 报警 的 邮箱 (默认 报警 邮箱 会 抄 送 给 Nutanix 售 后 服务 团队 ， 以 
获得 Nutanix 售 后 服务 的 主动 支持 ) 。 管 理 员 可 以 在 配置 菜单 中 配置 此 特性 ， 如 图 6-63 所 示 。 除 此 之 外 管理 员 还 可 以 自 定 义 友 送 报警 邮件 的 级 别 、 上 自 定 义 报警 邮件 的 标题 和 正文 等 配置 。 


Settings Rules Template 


Select if you would like to enable Alert Emails. You can add additional recipients and also check the status when applicable. 


Email Every Alert 


Email Dally Digest 


Email Recipients 


Nutanix Support (nos-alerts@nutanix.com) Comma separated email list 


Mode Default Nutanix Tunne 


Status » SUCCESS 


Service Center nscO2 nutanix net 
Established Since 06/27/17, 1113:04 AM 


Cancel Apply 


图 6-63 ”Nutanix 报 警 邮 件 配 置 


除了 上 述 的 网 页 和 邮件 发 送 报警 信息 的 方式 之 外 ，Nutanix 还 提供 了 对 于 SNMP 网 管 协 议 的 支持 ， 管 理 员 可 以 在 配置 菜单 中 配置 此 特性 ， 如 图 6-64 所 示 。 


Configure SNMP transports, traps and users. You can enable or disable SNMP for 


the Nutanix software. 


Enable SNMP 
Transports Users Traps 
+ New Transport 


No Transports Found. 


J | i Í | ü i 


图 6-64 SNMP R E 


管理 员 可 以 通过 现 有 支持 SNMP 的 网 管 软件 如 Nagios、SolarWinds、Zenoss 来 监控 Nutanix 集 群 的 健康 情况 。 图 6-65 展 示 了 通过 网 管 软件 SolarWinds 监 控 Nutanix 的 界面 。 


All IP Addresses on Angola Cluster EDIT | HELP 


IP VERSION IP ADDRESS 

IPv4 10.4.40.173 (polling IP) 

IPv4 10.4.40.165 

IPv4 192.168.5.2 

IPv4 192.1686.5.254 

clusterlops - Universal Device Poller EXPORT EDIT HELP 


Summary Chart 


Zoom lh 12h 24h 
40 k oor 


12:00 AM 3:00 AM 6:00 AM 9:00 AM 


12:00 PM 


IY BM clusteriops 


solarwinds T 


图 6-65 SolarWinds 界 面 


Os 关于 如 何 将 Nutanix 与 第 三 方 网 管 软件 集成 的 设置 ， 读 者 可 以 通过 以 下 地 址 获取 : 
Nagios: https://s3.amazonaws.com/ntnx-portal/utils/NagiosNutanixConfigs.pdf 
SolarWinds: https://s3.amazonaws.com/ntnx-portal/utils/SolarWindsNutanixConfigs.pdf 


Zenoss: https://s3.amazonaws.com/ntnx-portal/utils/ZenossNutanixConfigs.pdf 


无 论 是 通过 Prism 还 是 邮件 收 到 的 警报 信息 ， 其 实 都 是 由 运行 状况 页 面 中 内 置 的 检查 项 来 完成 的 ， 如 图 6-66 所 示 ， 在 Prism 中 上 自 市 了 超过 400 个 检查 项 来 进行 系统 的 自 检 ， 管 理 员 可 以 点 击 
Failed 和 Warning 了 解 相关 的 报错 与 警报 信息 。 


Branch-ESX-1 


Select an entity type Select an entity type Currently watching 317 entities. Summary Checks 
VM | 197 total 197 
© e aii eeu 
主机 3 eo @3 00 
v Passed 396 
ihe 35 eo o0 @ 35 X Failed 10 
主机 3 total 3 
t———————Ó————————————————— ! Warning 10 
存储 池 1 eo oo 0i 
E Error 0 
oe oe 3 Off 7 
容器 30 eo 上 Bo @30 磁盘 | 35 total pii 
(zr ———— —— —————A————————————————Xe— 5€ oO e 
保护 域 48 @22 09 0177 
: Scheduled 149 
远程 站 2 eo o1 @1 存储 池 1 total 1 Ə Not Scheduled 114 
| o e 
Event Triggered 160 
Clust... 1 e 1 [ 0 eo 
aa 30 total 20 


图 6-66 运行 状况 页 面 


管理 员 可 以 在 运行 状态 页 面 中 进行 健康 检查 ， 并 进行 检查 项 的 设 定 (如 关闭 部 分 检查 项 、 设 置 检查 项 的 检查 周期 等 ) 。 管 理 员 可 以 进行 检查 项 的 设置 修改 ， 如 图 6-67 所 示 。 


Branch-ESX-1 


Manage Checks CPU Utilization Bb Run Check (D Turn Check Off Zt Parameters V ©) Schedule Y Causes & Resolutions 
Y a Description: Verify whether current CPU utilization of the Controller VM is below 90 %. Causes of fallure 
. _ : T: -— VO workload on the cluster is high. 
f Check confiauration last ted 2 EË lace © itis scheduled t ain ite g 
CVM | CPU 
"SEM Resolutions 
w CPU Utilization > 
à Move VMs to other nodes in the cluster to 
Load Level History of entities evaluated by this check » " " 
"PM reduce load on the affected Controller VM. 
~” Mode Avg Load - Critical 
Jul 21 Jul 22 Jul 23 Jul 24 Today Impact 
CVM | Disk = 
2 High MO latency may be experienced by some 
. Boot RAID Health NTNX-135M66430023-B.. ia 
workloads. 
Disk Configuration i 
NTNX-145M85500112-A. f | 
. Disk Diagnostic Status References 
Disk Metadata Usage NTNX-135M66430023-.. Related Nutanix Knowledge Base (KB) Article 


» Disk Offline Status 

HDD Disk Usage 

HDD VO Latency 
^ HDD SMART Health Status 
ww Metadata Disk Mounted Check 


PF Metro Vstore Mount Status 
Non SED Disk Inserted Check 
Nutanix System Partitions Usag... 
.P Password Protected Disk Status 


Physical Disk Remove Check 
图 6-67 检查 项 修改 页 面 


运行 状况 里 提供 检查 项 按照 计划 自动 运行 ， 管 理 员 也 可 以 要 求 立即 执行 某 个 检查 项 进行 ， 在 图 6-67 中 ， 管 理 员 可 以 点 击 Run Check 进 行 立即 检查 。 如 果 管理 员 希望 立即 执行 所 有 的 检查 项 ， 


可 以 通过 在 CVM 中 执行 ncc health checks run_all 命 令 来 进行 健康 检查 。 如 图 6-68 所 示 ，NCC 的 健康 汇总 信息 中 共有 1 个 警报 ，4 个 致命 故障 ，6 个 错误 。 管 理 员 可 以 按照 提示 进行 问题 修复 。 


EP 104326845 - PuTTY le) 


Detailed information for auto support check: 


é | Support check 
m for dns server check: 


Node 10.132.68.43: 


i Fass dx —Ó—— 
. Uniy one 


Node 10.132.68.44: 


Only one name 


Node 10.132.68.42: 


E 


图 6-68 NCC BRE 


此 外 ，Nutanix 提 供 了 主动 技术 支持 服务 Pulse， 当 管理 员 开 启 Pulse 功 能 后 ， 系 统 将 自动 友 送 诊断 数据 (包括 系统 统计 信息 和 配置 信息 ) 到 Nutanix 支 持 服 务 器 ， 通 过 此 服务 ，Nutanix 支 持 
人 员 可 以 识别 潜在 的 问题 与 风险 并 提供 主动 的 技术 支持 服务 ， 管 理 员 可 以 在 配置 菜单 中 配置 此 特性 ，Pulse 的 配置 界面 如 图 6-69 所 示 。 


Nutanix 也 提供 了 远程 支持 的 特性 ， 这 个 特性 默认 处 于 关闭 状态 ， 在 系统 出 现 问 题 时 ， 管 理 员 可 以 临时 开启 这 个 特性 允许 Nutanix 技 术 支 持 人 员 通 过 SSH 连 接 到 集群 中 解决 故障 。 管 理 员 可 
以 在 配置 菜单 中 配置 此 特性 ， 其 配置 如 图 6-70 所 示 。 


Enable 


Email Recipients 


Nutanix Support (nos-asups@inutanix.com) Comma separated email list 


Verbosity 


Basic With Coredump 


Mode Default Nutanix Tunnel 


Status » SUCCESS 


Cancel 


图 6-69 Pulse 配置 


Nutanix technical support can provide remote assistance by logging Into the cluster 
through an SSH connection. 


© Enable for | 1 hour(s) Ww 
Disable 
Status ^ SUCCESS 
Service Center nscO 2 nutanix. net 
Established Since 07/15/17. 3:2 7:04 PM 


Cancel Save 


图 6-70 远程 支持 配置 


6.7 ”应 用 迁移 


在 实施 超 融 合 系统 时 ， 除 了 部 分 的 系统 会 采取 在 超 融 合 环境 中 全 新 部 署 忆 外， 对 于 遗留 系统 的 迁移 不 可 避免 ， 本 节 将 对 应 用 迁移 进行 介绍 。 主 要 包括 从 物理 机 到 虚拟 化 迁移 (P2V) ， 虚 拟 
化 平台 之 间 (V2V) 的 迁移 。 


服务 器 虚拟 化 技术 已 经 非常 成 熟 ， 不 同 的 虚拟 化 厂商 也 推出 了 相应 的 迁移 工具 来 帮助 用 户 实现 物理 机 到 虚拟 化 的 迁移 ， 常 见 的 工具 包括 VMware vCenter Converter, Citrix Xen- 
Convert, Microsoft Virtual Machine Converter, Platespin Migrate 等 。 通 过 上 述 迁 移 工 具 可 以 帮助 用 户 实现 从 物理 服务 器 到 超 融 合 环境 的 迁移 ， 相 关 工 具 的 使 用 可 以 参考 这 些 工 具 的 介绍 
文档 。 


6.7.1 同类 Hypervison 王 移 


如 果 源 系统 的 Hypervisor 与 目标 系统 的 Hypervisor 是 同一 种 ， 则 可 以 借助 虚拟 化 系统 自身 的 存储 迁移 功能 (如 VMware Storage vMotion, Citrix Storage XenMotion) 来 进行 跨 存 储 、 
跨 主机 之 间 的 虚拟 机 迁移 ， 如 图 6-71 所 示 。 


V2V 


图 6-71 相同 Hypervisotr 庶 拟 机 迁移 示意 
以 图 6-72 所 示 的 架构 为 例 ， 将 传统 架构 的 虚拟 机 迁移 到 基于 超 融 合 系统 的 虚拟 化 环境 中 。 以 下 为 迁移 的 操作 步骤 。 
1) 确认 Nutanix 集 群 的 数据 服务 I1P 地 址 ， 管 理 员 可 以 在 Prism 控 制 台中 点 击 左 上 角 集 群 名称 修 改 数据 服务 |P， 如 图 6-72 所 示 。 
2) 在 Prism 中 修改 Nutanix 集 群 的 文件 系统 白 名 单 ， 将 VMware 集群 的 I|P 段 加 入 Nutanix NFS 白 名 单 (访问 授权 ) ， 管 理 员 可 以 在 配置 菜单 中 配置 此 特性 ， 如 图 7-73 所 示 。 
3) 将 Nutanix 集 群 创建 的 存储 容器 通过 网 络 使 用 NFS 挂 载 到 计划 迁移 的 虚拟 机 所 在 的 ESXi 主 机 上 。 


a) 通过 vSphere 客 户 端 连接 到 计划 迁移 虚拟 机 所 在 的 vCenter Server， 添 加 存储 器 ， 选 择 网 络 文件 系统 ， 如 图 6-74 所 示 。 


CLUSTER UUID 
00053aa7-50e7-bda4-0000-0000000044dc 


CLUSTER ID 
00053aa7-50e7-bda4-0000-0000000044dc:17628 


CLUSTER INCARNATION ID 
1471865174867364 


CLUSTER NAME 


BigCloud-AHV-1 


CLUSTER VIRTUAL IP ADDRESS 
10.132.68.45 


ISCSI DATA SERVICES IP 


图 6-72 ”修改 数据 服务 IP 


Configure global whitelist entries (NFS whitelist for AHY and 
ESA, CIFS whitelist for Hyper-V). An entry consists of an IP 


Address and a netmask. Containerlevel whitelists can be set 


when creating or updating a storage container. 


Use the following format for entering it 


nnn.nnn.nnn.nnn/XXX.XxX. XXX. X XX 


where nnn is the IP address. and xxx is the subnet mask. 


IP ADDRESS/NETMASK 


101137 68. Q/ 755 255 257 0 


10132 710/255. 755.00 


182 168. 5. 253/255. 255 255 (0 


图 6-73 ”文件 系统 白 名 单 


Add 


REGS 


je eS TR x HERE YT ee ds eS VI PESE o 


帮助 (H) | 


Flies! 


C RS LUN 
TEXCET RGB. iSCSI 或 本 地 SCSI A FelESHETRÉE: 或 挂 载 现 有 的 VMFS # o 


© 网络 文件 系统 
DREGER AEAN o 


<s [m] a | 


图 6-74 添加 存储 器 


b) 在 服务 器 地 址 中 输入 Nutanix 集 群 的 数据 服务 IP， 文 件 夹 输 入 存储 容器 的 名 称 ， 并 为 数据 存储 命名 ， 如 图 6-75 所 示 。 


Erik podia V PES 


将 哪 小 共享 艾 件 来 用 作 vSphere 数据 存 铺 ? 


El NAS 
网 络 交 件 系统 
即将 元 成 


属性 


服务 器 : 四 132.68.46 


;n Bl: nas,nas.it.com . 192. 168.0. 1 或 
FE80:0:0:0: 2AA:FF:FE9A: 4CA 2 


文人 夹 : [mnt — — —— 
例如 : /vols/volo/datastore-001 
| 挂 载 品读 wes 


A 如 果 数 据 中 心 内 已 存在 此 NFs 共享 的 数据 存 傅 ， 且 您 要 入 新 主机 上 梧 音 
(BSR Tia: TEE DR GLA OA SHE ARS e DSL PESE) 与 站 e 


St 
Fuge tR is ae WA AGRAS. 即使 基础 NFS SF a. 不 同 的 
据 可 能 会 表示 不 同 的 数据 存 情 。 


数据 存 依 名称 
[vincent 


图 6-75 添加 NFS 存 储 


4) 通过 Storage vMotion 技 术 将 虚拟 机 从 现 有 存储 迁移 到 Nutanix DataStore, 


a) 选择 需要 迁移 的 虚拟 机 ， 选 择 更 改 数据 存储， 如 图 6-76 所 示 。 


选择 迁移 类 型 
更 履 虚 拟 机 的 主机 、 数 据 存 铺 或 二 者 同时 更 改 。 


C EREI 
将 虚拟 机 称 到 到 一 主机 。 


f# 重 改 数据 存储 
将 虚拟 机 的 存 铺 移 到 巡 一 数据 存 情 。 


C ”更改 主机 和 数据 存 鱼 
FREI AEM: HA asl ASR Hao 


图 6-76 虚拟 机 迁移 


b) 选择 之 前 挂 载 的 NFS 数 据 存储 ， 将 虚拟 机 迁移 到 存储 容器 中 ， 如 图 6-77 所 示 。 


frites 
ARA TAEAE e f ia © 


XE REDE T Th: 
Seas Fl 
XE REL PERI E f tia: 


| 驱动 器 类 型 | 
popa eel 
Nutanix afs-w.. 未 知 
Nutanix afs-w.. 未 知 
Nutanix Nutan.. FA 
SAP-DEMO FH 


"inn E 


[ 硅 用 此 虚拟 机 的 存储 DRS 
XE STBTIS: 


驱动 器 类 型 


BB CRS 


15.51 TB 
15.51 TB 
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1.45 GB 
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1.62 TB 


a ttt [不 更 改 配置 交 件 hal fy 


EXE 


pa 


15.51 TB 
15.51 TB 
15.51 TB 
15.91 TB 
15.51 TB 


可 用 空间 


NFS 
NFS 
NFS 
NFS 
NFS 


| Thin Provisioning | + 
党 支持 
党 支持 
党 支持 
党 支持 
党 支持 s 


Thin Provisioning 


ABE 
aru RH 


帮助 (H) | 


图 6-77 ”选择 虚拟 机 迁移 的 目标 存储 


5) 在 Nutanix 集 群 所 在 的 vCenter Server 上 注册 虚拟 机 。 


a) 打开 vCenter Server 主 界面 中 的 数据 存储 和 数据 存储 群集 ， 如 图 6-78 所 示 。 


ESSA) >> | 


文件 (Fl ”编辑 (E) 视图 (W) 清单 IN) 系统 管理 (A) EHP) 帮助 (H) 


à 主页 
a FP a OG e 
搜索 主机 和 群集 。 ”虚拟 机 和 模板 数据 存 情 和 数据 gE 
存 博 群 集 
系统 管理 
a a 只 > & & g 
角色 zi 许可 系统 日 志  vCenter Server 设 ”vCenter Solutions < 存储 提 世 程序  vCenter 服务 状态 
置 Manager 
管理 
"8 uu & GG & 
已 调度 任务 事件 映射 主机 配置 文件 BILE ” 自 定 兴 规范 管理 
文件 aU) 


图 6-78  vCenter Setvet 主 界面 


b) 找到 之 前 虚拟 机 迁移 到 的 目标 数据 存储 ， 点 击 浏 览 此 数据 存储 ， 如 图 6-79 所 示 。 


HA 编辑 ([E) WAM 清单 [N) 系统 管理 (A) EHP) 帮助 [H) 


@ 主页 og 清单 > 目 数据 存储 和 数据 存储 群集 


EB NTNX-local-ds- a 
EI NTNX-local-ds- 
E NTNX-local-ds- 
国 NTNX-local-ds- 
E NTNX-local-ds- 
EJ NTNX-local-ds- 
Ed. NTNX-local-ds- 
E NTNX-NFS-DEI 
Bl NUNU 

E Nutanix afsde 
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EB OracleRAC 
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EB SAP-DEMO 

EB Shanghai-2 

E SH-COLO-Metr 
EB SSIS-DB 

Bi Taiji-DB 

Bi tide 


E tradevm 


vincent (1) 


Aj T OE EA, 


主机 ”性 能 ”配置 AASS Sje PIR ae 
关闭 选项 卡 = 


什么 是 数据 存储 9 

数据 存 情 是 用 于 保存 虚 拆 机 六 件 以 及 虚拟 机 操作 所 必需 的 其 
他 六 件 的 膛 辑 容 眉 。 数 据 存 悄 能 存在 不 同类 型 的 物理 存储 ， 
包括 本 地 存 情 、iSCSI、 光 纤 通 道 SAN 或 NFS。 数 据 存 情 
可 以 基于 VMFS, 也 可 以 基于 NFS. 

您 可 以 通过 格式 化 LUN 或 装载 NFS 卷 到 现 有 主机 的 方式 来 
创建 新 的 数据 存储 。 此 外 ， 您 也 可 以 将 具有 现 有 数据 存 情 的 
主机 添加 到 清单 中 。 


基本 任务 
E 浏览 此 数据 存储 


p —————ÓÀ E 


图 6-79 访问 数据 存储 


C) 在 虚拟 机 目录 中 找到 .vmx 文 件 〈 虚 拟 机 摘 述 文件 ) ， 右 击 在 弹出 的 菜单 中 选择 添加 到 清单 ， 如 图 6-80 所 示 。 
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ii 
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图 6-80 “将 虚拟 机 添加 到 vCentet Setvet 清 单 


6) 虚拟 机 迁移 工作 已 经 完成 。 


6.7.2” 异 构 Hypervisor 迁 移 


在 很 多 环境 里 ， 用 户 可 能 基于 成 本 或 者 管理 方面 进行 考虑 ， 也 会 出 现 异 构 虚 拟 化 系统 之 间 迁 移 虚 拟 机 的 需求 ， 如 图 6-81 所 示 的 从 VMware ESXi 到 AHV 系 统 。 
针对 图 6-81 所 示 的 异 构 虚 拟 化 系统 之 间 的 虚拟 机 迁移 ， 可 以 使 用 以 下 的 步骤 : 
1) 在 计划 迁移 的 Windows 虚 拟 机 上 安装 Nutanix Guest Tools， 如 图 6-82 所 示 。 


2) 确认 Nutanix 集 群 的 数据 服务 IP 地 址 ， 管 理 员 可 以 在 Prism 控 制 台 中 点 击 集群 名 称 (如 图 6-83 中 的 BlgCloud-AHV-1 即 为 集群 名 称 ) 进行 修改 ， 如 图 6-83 所 示 。 


V2V 


图 6-81 异 构 Hypervisort 间 的 虚拟 机 迁移 


* Nutanix Guest Tools Setup |) E | 本 到 | 


NUTANI 4 Nutanix Guest Tools 


The Enterprise Cloud Company 


HUTANIX END USER LICENSE AG 
IMPORTANT - READ CAREFULLY 


READ THIS END USER LICENSE 
AGREEMENT (THE "AGREEMENT") BEFORE 
DOWNLOADING, INSTALLING, COPYING, 
CONFIGURING, ACCESSING, DEPLOYING, 
USING NUTANIX SUPPORT AND/OR USING 
THE SOFTWARE. BY DOWNLOADING, 
INSTALLING, COPYING, CONFIGURING, 
ACCESSING, DEPLOYING, USING NUTANIX 
SUPPORT AND/OR OTHERWISE USING ALL 
OR ANYPART OF THE SOFTWARE OR BY 


I agree to the license terms and conditions 


Install Close 


图 6-82 ”安装 NGT 工 具 


CLUSTER UUID 
00053aa7-50e7-bda4-0000-000000004Adc 


CLUSTER ID 
00053aa7-50e7-bda4-0000-0000000044dc:17628 


CLUSTER INCARNATION ID 
147186517486 7364 


CLUSTER NAME 


BigCloud-AHV-1 


CLUSTER VIRTUAL IP ADDRESS 
10.132.68.45 


ISCSI DATA SERVICES IP 


10.132 68 46 


图 6-83 ”修改 集群 数据 服务 IP 


3) 在 Prism 中 修改 Nutanix 集 群 的 NFS 白 名 单 ， 将 源 虚拟 化 集群 的 IP 段 加 入 Nutanix NFS 白 名 单 ， 如 图 6-84 所 示 。 


Configure global whitelist entries (NFS whitelist for AHY and 
ESA, CIFS whitelist for Hyper-V). An entry consists of an IP 
Address and a netmask. Containerlevel whitelists can be set 
when creating or updating a storage container. 


Use the following format for entering it 
nnn.nnn.nnn.mnn/XXxX. Xxx.xxx.xxXx 
where nnn is the IP address, and xxx is the subnet mask. 


IP ADDRESS NETMASK 
Add 


10.132 68.0/ 255 255 257 0 


10132 /10/ 255. 755.00 


132 168. 5. 253/7255, 255. 255.0 


图 6-84 NFS 白 名 单 
4) 将 Nutanix 集 群 创建 的 存储 容器 通过 网 络 使 用 NFS 挂 载 到 计划 迁移 的 虚拟 机 所 在 的 ESXi 主 机 上 。 


a) 通过 vSphere 客 户 端 连接 到 计划 迁移 虚拟 机 所 在 的 vCenter Server， 添 加 存储 器 ， 选 择 网 络 文件 系统 ， 如 图 6-85 所 示 。 


选择 存储 如 类 型 
{SEES tas LES TE IB eee ARS wits o 


存储 器 类 型 
C gift/LUN 
TEXCET RGB. iSCSI 或 本 地 SCS] 磁盘 上 创建 数据 存 请 ， 或 挂 载 现 有 的 VMFS 卷 。 


E 网络 文件 系统 


REREH R AAN o 


帮助 (H) | «E-& || 下 - 步 > | me | 


图 6-85 ”添加 存储 器 


b) 在 服务 器 地 址 中 输入 Nutanix 集 群 的 数据 服务 IP， 文 件 夹 为 存储 容器 的 名 称 ， 并 为 数据 存储 命名 ， 如 图 6-86 所 示 。 


Erik podia V PERS 
Tl" EES SSAA TE vSphere 数据 存 铺 ? 


El NAS 
mc et [10.13268.48 00 
示例 : nas,nas.it.com . 192.168.0.1 af 
FE80:0:0:0: 2AA:FF:FESA: 4CA2 
Hig: /vols/volü/datastore-001 


[ 挂 载 口 读 nes 


据 可 能 会 表示 千 同 的 数据 存 铺 。 


PIRTTI mtn 
[vincent 


图 6-86 ”添加 NFS 存 储 


5) 通过 Storage vMotion 技 术 将 虚拟 机 从 现 有 存储 迁移 到 Nutanix DataStore, 


a) 选择 需要 迁移 的 虚拟 机 ， 选 择 更 改 数据 存储， 如 图 6-87 所 示 。 


RHR 
更 也 虚拟 机 的 主机 、 Stats hae — STEER o 


C EREI 
将 虚拟 机 称 到 到 一 主机 。 


f# 重 改 数据 存储 
将 虚拟 机 的 存 铺 移 到 到 一 数据 存 情 。 


f ”更 改 主机 和 数据 存 鱼 
将 虚拟 机 称 到 如 一 主机 ， 将 其 存 情 称 到 如 一 数据 存 铺 。 


图 6-87 虚拟 机 迁移 


b) 选择 之 前 创建 的 NFS 数 据 存储 ， 将 虚拟 机 迁移 到 存储 容器 中 ， 如 图 6-88 所 示 。 


frites 
ARA TAE e f ia © 


选择 虚拟 磁盘 格式 : 

与 源 格式 相同 7 

选择 虚拟 机 文件 的 目标 存储 : 

虚拟 机 存 彤 配置 文件 ， | 不 更 改 配置 文件 7] 4 


JER 驱动 异类 型 ae mn 可 用 空间 | 类 型 Thin Provisioning | + 
ES Nutanix afsd.. HA 15.51 TB 264.00 KB 15.51 TB NFS mbt 
Ed Nutanix afs-w.. 未 知 15.51TB 1.45 GB 15.51 TB NFS matte 
EJ  Nutanix afs-w.. 未 知 15.51 TB 132.00 KB 15.51 TB NFS mbt 
ES  Nutanix Nutan.. AA 15.82 TB 463.59 GB 15.51 TB NFS mbt B 
Ed SAP-DEMO 未 知 17.19 TB 1.82 TB 15.51 TB NFS meg 


[^ 禁用 此 虚拟 机 的 存 情 DRS 
ATES ETT IA: 


名 称 | abe) BB lee | 可 用 空间 | 类 型 | Thin Provisioning 


高 故人) >> | 
兼容 性 : 
验证 成 功 


帮助 (H) | Sm 下 一 步 > 取消 


图 6-88 ”选择 虚拟 机 迁移 的 目标 存储 
6) 在 Nutanix Prism 中 创建 虚拟 机 ， 并 挂 载 之 前 迁移 的 虚拟 机 VM DK 文 件 。 
a) 在 Prism 控 制 台 的 虚拟 机 页 面 ,创建 虚 拟 机 ， 并 配置 虚拟 机 相关 信息 ， 如 虚拟 机 名 称 、vCPU 数 量 、 内 存 容量 ， 如 图 6-89 所 示 。 


b) 在 创建 虚拟 机 页 面 中 ,创建 虚拟 磁盘 ， 点 击 Add New Disk， 如 图 6-90 所 示 。 


General Configuration 


NAME 
wmiüo 2 


DESCRIPTION 


O (SRA vM 作为 代理 vM 


Compute Details 


VCPU(S) 


NUMBER OF CORES PER VCPU 


2 


Cancel 


图 6-89 ”创建 虚拟 机 


Disks Add New Disk 


CD-ROM EMF T Y-true; BUS=ide ÁÜ.X 


Volume Groups 


Cancel 


图 6-90 ”创建 虚拟 磁盘 


c) 在 创建 磁盘 页 面 ， 选 择 磁盘 类 型 为 DISK， 操 作为 从 ADSF 文 件 克 隆 ，BUS TYPE 选 择 虚 拟 机 之 前 创建 的 类 型 ， 在 ADSF PATH 中 输入 虚拟 机 存储 的 路 径 ， 路 径 格式 为 : /存储 容器 名 称 / 虚 
拟 机 名 称 /虚拟 机 VMDK (Flat) 文件 ， 如 图 6-91 所 示 。 


M 


h^, ADSF x br" 


BUS TYPE 


SESI 


SIZE (tGIB 
Cancel 
图 6-91 添加 磁盘 
d) 完成 图 6-91 所 示 的 配置 后 ， 点 击 Add 完 成 磁盘 添加 。 回 到 虚拟 机 创建 页 面 ， 添 加 网 卡 等 信息 。 点 击 Save， 完 成 虚拟 机 创建 。 


7) 虚拟 机 创建 完成 后 ， 管 理 员 可 以 开局 虚拟 机 电源 并 登录 到 虚拟 机 系统 中 删除 VMware Tools 以 及 VMware 相 关 的 软件 。 


6.7.3 ”镜像 服务 导入 应 用 


Nutanix 在 基于 AHV 的 集群 中 提供 了 镜像 服务 的 功能 ， 这 个 功能 可 以 用 于 管理 员 上 传 虚拟 机 磁盘 文件 (如 VMDK、VHDX、Qcow、Qcow2、VDI、RAW) 以 及 系统 光盘 镜像 /SO 文件 等 。 


如 图 6-92 所 示 ， 管 理 员 可 以 将 一 个 VMDK 文 件 变 成 一 个 镜像 ， 供 用 户 多 次 使 用 。 


管理 员 可 以 在 虚拟 机 创建 时 ， 添 加 由 镜像 服务 提供 的 ISO 或 虚拟 磁盘 文件 来 启动 虚拟 机 。 如 图 6-93 所 示 ， 将 之 前 创建 的 虚拟 机 磁盘 镜像 挂 载 到 虚拟 机 上 。 


NAN 


vincent VMDK 


ANNOTATION 


IMAGE TYPE 


DISK Wf 


STORAGE CONTAINER 


vincent we 
IMAGE SOURCE 
O From URL nfs//12 7.0.0 T/vincent/vincent/vincent vmdk 
Upload a file ZR EHE fA] Be 


wr 


返回 取消 


图 6-92 ”创建 镜像 文件 


OPERATION 


Clone from Image Service 


BUS TYPE 


=) 


IMAGE 


vincent VMDK 


Cancel 


图 6-93 ”添加 磁盘 时 可 选 镜像 服务 


此 外 ， 管 理 员 也 可 以 使 用 aCLI 命 令 来 创建 镜像 文件 ， 以 下 是 一 个 使 用 在 CVM 上 执行 aCLI 创 建 虚拟 机 镜像 的 示例 。 


acli image.create vincentimage source url=nfs://10.0.0.1/datastore/vincent/vincent.vmdk container=vincent image type=kDiskImage 


执行 上 述 命令 ， 


源 地 址 除了 可 以 是 NFS 地 址 之 外 ， 也 可 以 是 HTTP 地 址 ，CVM 将 通过 指定 的 URL 地 址 进行 虚拟 磁盘 文件 的 下 载 ， 并 自动 进行 虚拟 机 磁盘 的 创建 。 


6.8 目 动 化 操作 


将 由 aCLH 创 建 一 个 名 称 为 vincentimage 的 镜像 ， 虚 拟 磁盘 的 源 文件 在 I|P 地 址 为 10.0.0.1 的 NFs 服 务 器 上 。 这 个 镜像 将 存储 在 名 称 为 vincent 的 存储 容器 中 。 


另外 ， 也 对 批量 操作 CVM 


Nutanix 针 对 高 级 用 户 提供 了 API、CLHI 等 管理 方式 ， 人 允许 管理 员 通 过 Prism 之 外 的 管理 工具 进行 自动 化 的 管理 操作 。 本 节 将 对 Nutanix API 以 及 CH 命令 进行 介绍 ， 


和 Hypervisor 主 机 的 工具 进行 了 介绍 。 


6.8.1 Nutanix API 介 绍 


Nutanix 提 供 了 多 种 管理 方式 管理 Nutanix 集 群 ， 如 Prism、CLI、REST API， 通 过 REST APl， 管 理 员 可 以 批量 和 自动 化 地 实现 Nutanix 集 群 的 管理 。 通 过 Prism 控 制 台 ， 管 理 员 可 以 进入 API 
Explorer 进 行 API 的 浏览 ， 如 图 6-94 所 示 。 


INE REST API Explorer Live! 


Nutanix API V2 API Version 2 + 


authconfig Show/Hide | List Operations | Expand Operations 
cloud Show/Hide | List Operations | Expand Operations 
cluster Show/Hide | List Operations | Expand Operations 
clusters Show/Hide | List Operations | Expand Operations 
data at rest encryption Show/Hide | List Operations | Expand Operations 
data at rest encryption certificates Show/Hide | List Operations | Expand Operations 
disks Show/Hide | List Operations | Expand Operations 
events Show/Hide | List Operations | Expand Operations 
file groups Show/Hide | List Operations | Expand Operations 
ha Show/Hide List Operations Expand Operations 


图 6-94 Nutanix API Explorer 


此 外 ， 管 理 员 也 可 以 通过 网 址 http://developer.nutanix.com/ 进 入 Nutanix 开 发 者 社区 ， 来 查询 和 交流 Nutanix API 的 相关 信息 ， 如 图 6-95 所 示 。 


NUTANIX DEVELOPER V X fe Uu 
Nutanix API V3 New Nutanix API V2 
Complete reference for the V3 Nutanix API, including code samples in multiple Complete reference for the V2 Nutanix API, including code samples in multiple 
languages. This version of the API is intentful, which is a new paradigm for APIs. languages. This version of the API is an update of the V1 Nutanix API. 


V3 API Docs > V3 API SDK » V2 API Docs > 


E € <> 得 
Migration Tutorials Code Samples Partner 
Already using Nutanix API? Check A variety of detailed examples of Code samples contributed by Already a Nutanix partner? Want to 
our guidelines for updating your V1 implementing the APIs in your developers from Nutanix, customers, become one? Find out more about 
API code to V2. Nutanix environment. and partners. being a Nutanix partner. 
View Migration Guides » View Tutorials » View Code Samples » Connect with Nutanix » 


图 6-95 ”Nutanix 开 发 者 社区 


接 下 来 ， 通 过 API Explorer 的 操作 来 介绍 Nutanix API 的 使 用 。 使 用 API Explorer 工 具 来 直接 查询 整个 集群 中 虚拟 机 的 情况 。 


在 Prism 控 制 台 中 ， 点 击 用 户头 像 图 标 可 以 找到 REST API Explorer 功 能 ， 如 图 6-96 所 示 。 


图 6-96 REST API Explorer 


打开 REST API Explorer 之 后 ， 点 击 vms 来 执行 虚拟 机 相关 的 操作 ， 在 vms 下 方 列 出 了 和 虚拟 机 相关 的 操作 如 GET/POST/DELETE/PUT 等 。 点 击 第 一 行 的 Get a list of Virtual machines 功 能 
来 查询 所 有 的 虚拟 机 信息 ， 如 图 6-97 所 示 。 


vms Show/Hide | List Operations | Expand Operations 

Ivms/ Get a list of Virtual Machines. 
/vms/ Create a Virtual Machine. 

GET = /vms/{uuid} Get a list of Virtual Machines. 
/vms/{uuid}! Delete a Virtual Machine. 

PUT /vms/{uuidy Update a Virtual Machine. 
/vms{uuid}/clone Clone a Virtual Machine. 
/vms/{uuid\disks/attach Attach disks to Virtual Machine. 
/vyms/fuuidydisks/detach Detach disks from Virtual Machine. 
/vms/fuuid//manage vm guest tools Mount and unmount guest tools on a given Virtual Machine. 


图 6-97 vms 相 关 操 作 


根据 需要 设 定 是 否 需 要 显示 磁盘 和 网 卡 的 信息 之 后 ， 点 击 Try It out! 按钮 来 执行 查询 操作 ， 如 图 6-98 所 示 。 


Ams/ Get a list of Virtual Machines. 


Implementation Notes 
Get a list of Virtual Machines. 


Virtual Machine disk information and network information are not included by default as fetching these are 
expensive operations. These can be included by setting the include vmdisk config and include vmnic config 
flags respectively. 


Response Class (Status 200) 
Model Model Schema 


J 


Lv -QO—AMM— c4 d. (UA 
e cofhtalner UUI d . euin 


applicationjjson . Response Content Type 


Parameters 
Parameter Value Description oo Data Type 
include vm disk config trye : Whether to include query boolean 
Virtual Machine 
disk information. 
include vm nic config false : Whether to include query boolean 
network 
information. 


图 6-98 ”虚拟 机 清单 查询 


在 点 击 Try it out! 按钮 之 后 ,在 下 方 的 Response Body 框 中 得 到 所 有 虚拟 机 的 信息 ， 如 图 6-99 所 示 。 


Request URL 


https-//10.132.68.45:8440/api/nutanix/v2.0/vms/?include vm disk config-true&include vm nic config-false 
( """"""-IIS.: 
Response Body 


P 


C 
"metadata": { 
"grand total entities": 148, 
"total entities": 0, 
"count": 148 
h 
“entities”: [ 
{ 
"allow live migrate": true, 
"gpus assigned" false, 
"ha priority": 0, 
"memory mb" 2048, 
"name": "QBR11", 


aem aram mom mum, m am m rm sorum ama a Te 0T 


1 ccc Ug" d 
Response Code 


200 


图 6-99 ”查询 结果 
至 此 已 经 完成 了 一 个 最 简单 的 查询 操作 。 


除了 可 以 通过 Nutanix 提 供 的 REST API Explorer 工 具 进行 API 的 操作 之 外 ， 还 可 以 使 用 如 Postman 这 样 的 工具 按照 指定 顺序 进行 API 操 作 。 如 图 9-100 所 示 ， 可 以 通过 Postman 工 具 一 次 性 
执行 多 个 操作 。 


Collection Runner Run Results Run In Command Line 


6 Nutanix No Environment Export Results 
PASSED just now 


Iteration 1 


New 


B 

= 国 GET https//10.68.69.102:9440/PrismGateway/services/rest/v2.0/i.. https://10.68.69.102:944... 200 OK 147 ms e486 A 

m 

BN PASS Status code is 200 

国 

BB GET https//10.68.69.102:9440/PrismGateway/services/rest/v2.0/s... https://10.68.69.102:944... 200 OK 96 ms 17.143 KB A 
BN PASS Status code is 200 

B GET https//10.68.69.102:9440/PrismGateway/services/rest/v2.0/v... https://10.68.69.102:944... 200 OK 94 ms 2.683 KB a 
国 PASS status code is 200 

E FOST https/10.68.69.102:9440/PrismGateway/services/rest/v2.0/v... https://10.68.69.102:944... 201 Created 173 ms 526 E 
BN PASS Successful POST request 

B Post https//10.68.69.102:9440/PrismGateway/services/rest/v2.0/v... https://10.68.69.102:944... 201 Created 108 ms 52 B a 
国 Pass Successful POST request 


BN DELETE https;//10.68.69.102:9440/PrismGateway/services/rest/v2.0/v... https://10.68.69.102:944... 201 Created 150 ms 52 B A 


BN PASS Successful POST request 


图 6-100  4& Jf Postman 1 E dE 4T Ht APTA AE 


6.8.2 ”CLI 操作 


在 日 常 的 Nutanix 管 理 过 程 中 ， 除 了 可 以 使 用 Prism 控 制 台 方式 进行 管理 之 外 ， 管 理 员 还 可 以 通过 nCLIl (Nutanix CLI) 和 aCLl (Acropolis CLI) 进行 集群 和 虚拟 化 系统 的 管理 。 
- aCLl 介 绍 


aCLI 是 提供 给 管理 员 用 于 管理 主机 、 网 络 、 快 照 和 虚拟 机 的 工具 ， 通 过 aCLI Shell 可 以 完成 如 图 6-101 所 示 的 命令 。 


= — —— mu 7 = 
Dynamic Sche 


anagementu 
management 


whet 7 On = "emen 


ULIG GLOL © l idc 


Imacnine Mana 


vii Group 


图 6-101 ”aCLI 命 令 


限于 篇 幅 ， 仪 对 常用 的 命令 进行 介绍 ， 表 6-3 列 出 了 常用 命令 。 读 者 可 以 通过 Nutanix 提 供 的 《Command Reference) LERRA TE. 


表 6-3 aCLI 常 用 命令 


命令 描述 支持 的 Hypervisor 
ads Acropolis 动态 调度 配置 通用 
: LAR 
host AHV 主机 操作 仅 AHV 
iscsi client 常理 ISCSI 2c P? ym Fe 通用 
= SCART 
Snapshot AHV 快照 管理 仅 AHV 
task 任务 管理 通用 
vm AHV VM 管理 fX. AHV 
vm group 虚拟 机 组 ， 用 于 关联 / 反 关 联 使 用 通用 


- aCLI 的 使 用 


aCL| 需 要 在 CYM 上 运行 ， 管 理 员 可 以 通过 SSH 工 具 连 接 到 CVM 上 才 可 以 使 用 aCLl。 


aCLl 命 令 支持 两 种 使 用 方式 : 


nutanix@CVMS acli 


或 


nutanix@CVM$ acli < 命令 > 


第 一 种 方式 与 第 二 种 方式 最 大 的 区 别 在 于 第 一 种 方式 允许 管理 员 使 用 TAB 键 来 自动 补 全 参数 名 称 。 


接 下 来 ， 使 用 aCLI 完 成 几 个 常见 的 任务 。 


- 创建 一 个 名 称 为 testvm 的 虚拟 机 


<acropolis> vm.create testvm memory-2G num vcpus-2 


- 创建 多 个 虚拟 机 


<acropolis>  vm.create testVM[000http://www.hzcourse.com/resource/readBook?path=/openresources/teach_ebook/uncompressed/17163/OEBPS/Text/..009] memory=2G num vcpus-2 


- 关闭 testvm 虚 拟 机 


<acropolis> vm.off testvm 


: 关闭 所 有 testvm 开 头 的 虚拟 机 


<acropolis>  vm.off testvm* 


开局 一 个 虚拟 机 


<acropolis> vm.on testvm 


开启 所 有 虚拟 机 


<acropolis> vm.on * 


. 创建 网 络 


<acropolis> net.create vlan120 vlan=120 


. 查询 网 络 


<acropolis> net.list 


从 虚拟 机 磁盘 创建 镜像 


<acropolis> image.create image001 clone from vmdisk=vm:testvm:scsi.0 


当 需 要 帮助 时 ， 可 以 输入 help， 当 需要 退出 aCLl shell 时， 可 以 使 用 exit 命 令 退 出 。 
. nCLIl 介 绍 


在 使 用 方法 上 ，nCLI 与 aCLI 类 似 ，aCLl 主 要 用 于 AHV 的 管理 ，nCLI 主 要 用 于 集群 管理 ， 如 创建 存储 容器 、 创 建 AFS、 配 置 保 护 域 等 。 通 过 nCLI 可 以 帮助 管理 员 使 用 脚本 、 命 令 行 方 式 来 执 
行 集群 的 管理 任务 。 


nCLI 命 令 很 多 ， 我 们 仅 对 常用 的 命令 进行 介绍 ， 如 表 6-4 所 示 。 


表 6-4 nCLI 常 见 操作 


alerts EI 

cluster Nutanix 集群 
container TETUER 
datastore NFS Datastore 
disk 物理 磁盘 
events 事件 

file-server AFS StF AR tir 
health-check 健康 检查 

Host 物理 主机 
multicluster Prism Central 管理 多 集群 相关 
network 网 络 命令 


nutanix-guest-tools 
rackable-unit 


rsyslog-config 


Nutanix Guest Tools 管理 
机 架 单 元 管理 — 用 于 机 箱 感 知 
Rik Log 到 syslog 服务 需 


snapshot 虚拟 磁盘 快照 
software NOS 软件 
storagepool 物理 磁盘 存储 池 
storagetier 物理 存储 分 层 

task 任务 

user 用 户 

vdisk 虚拟 磁盘 
virtual-disk 对 虚拟 磁盘 进行 操作 
virtualmachine 虚拟 机 
volume-group ABS 42H 


nCLI 功 能 非常 强大 ， 可 以 完全 覆盖 Prism 的 图 形 界面 中 的 操作 ， 使 用 nCLI 的 好 处 是 管理 员 可 以 通过 脚本 化 的 方式 批量 完成 集群 配置 。 


管理 员 可 以 通过 SSH 工 具 访 问 集 群 中 的 任意 一 台 CVM 进 入 nCLI Shell， 也 可 以 在 Prism 控 制 台 上 下 载 安 六 nCLI 工 具 来 使 用 nCLl， 如 图 6-102 所 示 。 


图 6-102 下载 nCLI 工 具 


nCLI 和 aCLl 一 样 ， 支 持 两 种 使 用 方式 ,: 


nutanix@CVMS ncli 


at 


nutanix@CVM$ ncli < 命令 > 


以 几 个 常用 的 示例 来 介绍 nCLI 的 使 用 。 


` 列 出 集群 信息 
ncli> cluster info 
] 出 集群 版 本 信息 
息 


已 


ncli» cluster version 


IDEE: 
list 


ncli» container 


IEEE ELEM 


ncli» sp list 
- 创建 名 为 ctt001 的 重复 数据 删除 
ncli» container create name-ctr001 sp-name-StoragePool 


: 列 出 主机 相关 信息 


ncli> host list 
ncli» cluster set-timezone timezone-Asia/Chongqing 
false 


` 修改 集群 的 时 区 为 中 


到 集群 里 所 有 CVM 和 AHV 主 机 的 主机 和 名， 如 


: 关闭 存储 的 Shadow Clone 功 能 
ncli» cluster edit-params enable-shadow-clones- 
速 得 


要 通过 SSH 登 录 到 各 个 CVM、Hypervisor 主 机 上 进行 操作 ， 如 果 集 群 中 的 节点 较 多 ， 登 录 每 个 CVM 或 主机 进行 操作 的 话 会 增加 管理 的 复杂 度 。 
因此 ，Nutanix CVM 中 提供 了 批量 操作 的 SSH 命 令 如 allssh 和 hostssh 命 令 ， 可 以 提高 管理 员 的 操作 效率 ， 批 量 完成 CVM 以 及 主机 相关 的 操作 。 


J 的 批量 操作 


6.8.3 ”命令 

管理 员 在 日 常 管理 、 故 障 处 理 过 程 中 可 

allssh 命 令 用 于 对 所 有 的 CVM 进 行 批量 操作 ， 而 hostssh 用 于 对 所 有 的 主机 进行 操作 ， 如 图 6-103 所 示 。 
个 命令 的 使 用 。 

在 4 个 节点 的 集群 里 ， 若 要 快速 了 解 各 个 CVM 和 各个 主机 的 主机 和 名， 那么 可 以 通过 执行 allssh hostname 以 及 hostssh hostname 命 令 ， 快 i 
另外 ， 管 理 员 也 可 以 使 用 如 allssh"manage_ovs show interfaces" 这 样 的 命令 来 显示 所 有 主机 网 卡 的 连接 情况 ， 如 图 6-105 所 示 。 


接 下 来 的 内 容 将 以 常用 的 几 个 操作 来 介绍 两 


图 6-104 所 示 。 
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Internal IP 
192.168.5.2 


aCLI «acropolis» 


allssh 


BASH nutanix(CVM$ 
hostssh 


AHV Host 1 


Internal IP 
192.168.5.1 


BASH root@AHYV# 


图 6-103  allssh/hostssh 4? 47$ 3€ 


10.132.68.45 - PuTTY 
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hostname 
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Connecti 
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图 6-104 ”allssh/hostssh 操 作 示 例 


理 员 需要 进行 批量 的 修改 还 是 显示 信息 


i 


通过 allssh 和 hostssh 命 令 ， 可 以 有 效 地 提高 管理 员 操 作 效率 ， 无 论 


Controller VM N 


Internal IP 
192.168.5.2 


aCLI <acropolis> 


nutanixQCVM$ ssh root@192.168.5.1 


AHV Host N 


Internal IP 
192.168.5.1 


BASH rootGAHV# 


ee 10.132.68.45 - PuTTY 


1x8NINX-1435M15380 CVI |. 132 "s Iss | i show 


图 6-105  allsshzr 45 


建立 在 Nutanix 超 融合 系统 和 企业 云 平台 之 上 的 数据 中 心 ， 可 以 支持 多 种 工作 负载 ， 满 足 不 同 的 应 用 场景 的 需求 ， 包 括 服 务 器 虚拟 化 、 关 键 应 用 、 虚 拟 桌 面 、 数 据 保护 和 灾 备 、 大 数据 、 分 
文 机 构 、 开 上 友 测 试 云 ， 等 等 。 借 助 超 融合 系统 融 来 的 可 靠 性 、 扩 展 性 和 弹性 ， 在 工作 负载 增加 或 者 需要 部 署 新 应 用 时 ， 可 以 通过 细 粒 度 的 扩展 来 满足 数据 中 心 的 业务 增长 需 


随 着 企业 业务 的 友 展 ， 业 务 运营 越 来 越 依赖 IT 技 术 。 企 业 使 用 多 种 应 用 程序 来 满足 不 同 的 业务 部 门 的 需求 ，IT 部 门 也 会 根据 SLA 的 优先 级 来 支持 应 用 程序 。 如 对 于 企业 的 关键 应 用 需要 提供 
最 高 级 别 的 安全 、 性 能 和 可 靠 性 保障 。 


企业 内 部 的 任何 应 用 程序 ， 当 它 持续 很 长 时 间 不 可 用 或 者 性 能 下 降 的 时 候 ， 会 对 企业 的 生产 力 、 声 誉 和 财务 活力 构成 严重 影响 ， 这 种 应 用 程序 就 是 企业 的 关键 应 用 ， 如 数据 库 系 统 、ERP 系 
统 等 都 可 以 定义 为 企业 的 关键 应 用 。 


随 痢 超 融 合 和 虚拟 化 技术 的 进步 ， 以 及 使 用 超 融 合 系统 的 案例 越 来 越 多 ， 用 户 已 经 有 信心 将 超 融 合 系统 应 用 于 核心 的 业务 系统 当中 。 因 此 ， 很 多 组 织 开始 将 核心 应 用 系统 从 物理 机 或 传统 三 
层 染 构 迁 移 到 超 融 合 系统 之 上 以 得 到 更 好 的 性 能 、 扩 展 性 和 可 靠 性 。 


7.1.1 ”支持 各 类 关键 应 用 


如 图 7-1 所 示 ， 企 业 可 以 在 超 融 合 系统 上 运行 不 同 的 应 用 程序 ， 如 虚拟 桌面 、 应 用 服务 器 、 数 据 库 等 ， 管 理 员 不 再 需要 为 这 些 应 用 单独 搭建 一 套 硬件 环境 来 分 别 进行 部 署 。 通 过 这 种 部 署 方 
式 ， 可 以 降低 1T 基 础 设施 的 成 本 ， 减 少 管理 员 运 维 管理 的 工作 量 ， 同 时 也 有 效 地 提高 了 资源 的 利用 率 。 


应 用 程序 /数据 


i 
= 


Oracle VM 


图 7-1 在 超 融 合 平台 上 运行 不 同 的 应 用 程序 


通过 Nutanix 超 融合 平台 提供 的 ABS ( 块 服务 ) 特性 ， 管 理 员 可 以 创建 Volume Group ( 卷 组 ) 为 应 用 程序 提供 块 存储 功能 。 很 多 应 用 程序 的 集群 功能 都 依赖 共享 盘 方式 才 可 以 实现 ， 如 基 
于 Windows 故 障 转移 集群 组 建 的 SQL Server 数 据 库 集群 、Oracle RAC 数 据 库 等 。 


ABs 不 仅 可 以 通过 iSCSI 方式 为 这 些 应 用 提供 块 人 存储， 同时 ABs 也 提供 了 负载 均衡 的 功能 ， 可 以 让 I/O 分 布 到 不 同 的 超 融合 节点 之 上 ， 加 速 应 用 程序 的 响应 时 间 、 提 升 应 用 程序 的 性 能 。 


对 于 使 用 ABS 作 为 数据 存储 的 数据 库 ， 可 以 通过 Nutanix 内 置 的 克隆 技术 快速 复制 一 个 生产 (或 者 测试 ) 数据 库 ， 提 升 用户 构 建 开 发 测试 及 发 布 环 境 的 工作 效率 。 如 图 7-2 所 示 ， 通 过 结合 虚 
拟 化 及 超 融 合 的 优势 ， 可 以 文 持 包括 开 友 、 测 试 、 准 生产 、 生 产 各 阶段 的 数据 库 运 行 环境 。 


ORACLE Sb server 
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图 7-2 ”使 用 Nutanix 运 行 数据 库 


生产 数据 库 


7.1.2 Nutanix 为 关键 应 用 带 来 的 优势 


将 企业 的 关键 应 用 如 Oracle RAC 迁 移 到 超 融 合 平台 可 以 获得 诸多 的 优势 : 
首先 ， 管 理 员 可 以 通过 一 个 统一 的 平台 来 进行 各 类 应 用 的 管理 ， 而 不 再 出 现 由 硬件 、 软 件 和 管理 构成 的 竖井 的 情况 。 
其 次 ,利用 超 融 合 的 平行 扩展 能 力 ， 应 用 程序 在 超 融 合 上 运行 可 以 得 到 按 需 扩 展 的 能 力 ， 当 在 集群 中 增加 节点 时 ， 应 用 程序 的 性 能 也 能 实现 线性 增长 。 


再 次 ,结合 超 融 合 和 虚拟 化 的 优势 ， 可 以 让 应 用 得 到 更 高 的 可 用 性 ， 用 户 不 再 担心 服务 器 和 和 存储 的 故障 (在 传统 三 层 架构 中 ， 人 存储 往往 存在 单 点 故障 ) 对 业务 市 来 的 影响 。 利 用 虚拟 化 的 高 
可 用 技术 ， 可 以 在 服务 器 出 现 故 障 时 应 用 虚拟 机 自动 在 其 他 健康 节点 上 重启 ,减少 了 应 用 的 停机 时 间 。 


另外 ， 当 应 用 需要 扩容 时 ， 以 往 管理 需要 进行 从 硬件 准备 到 操作 系统 和 应 用 安 沪 配 置 等 一 系列 复杂 工作 ， 而 利用 虚拟 化 和 超 融 合 的 快速 克隆 功能 ， 可 以 快速 地 置 备 新 的 应 用 节点 ， 不 再 需要 
进行 重复 的 安装 、 配 置 功能 ， 同 时 通过 克隆 方式 也 帮助 应 用 实现 了 操作 系统 和 应 用 配置 方面 的 标准 化 ， 更 有 利于 日 后 的 故障 排查 和 处 理 。 


综 上 所 述 ， 通 过 在 超 融合 以 构 上 部 署 企业 的 核心 应 用 ， 可 以 满足 业务 对 IT 系统 的 安全 性 、 可 靠 性 以 及 高 性 能 要 求 。 


7.2 数据 保护 方案 


企业 越 来 越 依赖 T 系 统 ，IT 数 据 直 接 关系 到 企业 的 竞争 力 ， 业 务 上 要 求 IT 能 够 提供 更 高 级 别 和 更 细 颗 粒度 的 数据 保护 。 另 一 方面 ， 随 着 数据 量 的 增加 ， 进 行 数据 备份 所 花费 的 时 间 也 变 得 越 
来 越 长 。 此 外 ， 异 构 的 基础 架构 、 应 用 场景 、 应 用 种 类 等 也 增加 了 实施 数据 保护 的 复杂 度 和 成 本 ， 这 些 因素 加 大 了 数据 保护 的 难度 。 


Nutanix 数 据 保护 满足 现代 企业 需求 ， 不 仪 提供 更 高 效 地 利用 存储 空间 的 快照 技术 、 以 VM 为 核心 的 数据 保护 方式 ， 针 对 不 同 RTO 和 和 RPO 需求 的 同步 和 异步 数据 复制 ， 还 提供 持续 数据 保护 
和 可 与 公有 云 交互 的 备份 方式 。 


7.2.1_ Nutanix 平 台 内 置 的 数据 保护 机 制 


Nutanix 提 供 一 系列 数据 保护 机 制 以 满足 应 用 不 同 的 RPO 和 RTO 需 求 ， 其 独创 的 跨 Hypervisor 的 数据 保护 功能 ， 可 以 支持 VMware ESXi, Nutanix AHV 和 Microsoft Hyper-V 虚 拟 化 平台 。 
用 户 无 须 额 外 购买 硬件 和 软件 就 可 以 使 用 这 个 特性 ， 最 大 程度 地 简化 了 基础 架构 的 复杂 性 ， 简 化 了 IT 部 门 的 管理 负载 ， 降 低 了 数据 中 心 成 本 。 企 业 可 以 根据 自身 的 数据 保护 需求 ， 采 取 不 同 的 数 
据 保护 策略 ， 如 归档 、 快 照 、 备 份 、 异 步 、 同 步 复 制 和 容 灾 ， 如 图 7-3 所 示 。 


异步 复制 Metro 
归档 快照 备份 Availability 
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个 数据 保护 频率 


图 7-3 不 同 RPO 的 数据 保护 机 制 


` 灵活 的 基于 VM 的 数据 保护 策略 ， 满 足 应 用 在 虚拟 化 环境 的 RPO 和 RTO 需 求 。 以 VM 为 对 象 ， 通 过 将 有 同样 数据 保护 需求 的 VM 放 在 同一 个 保护 域 中 来 制定 保护 策略 ， 满 足 不 同 应 用 的 SLA 
需求 。 也 支持 把 相互 依赖 的 应 用 VM 统一 放置 在 一 个 保护 域 中 ， 通 过 应 用 一 致 性 快照 保证 应 用 状态 的 一 致 性 。 


` 本 地 、 远 端 站 点 和 公有 云 的 备份 。Nutanix 基 于 快照 的 备份 可 以 更 有 效 地 节约 存储 空间 ， 提 高 存储 效率 。 备 份 数 据 管 理 方面 ， 可 通过 制定 备份 计划 和 数据 保留 策略 ， 将 数据 备份 到 本 地 、 远 
端 站 点 和 公有 云 。 本 地 的 单 节点 复制 方案 可 以 摆脱 网 络 的 限制 ， 在 本 地 数据 中 心 实现 数据 的 快速 恢复 。Nutanix 还 支持 文件 级 数据 恢复 ， 最 终 用 户 可 以 在 操作 系统 上 自助 挂 载 历史 数据 ， 使 用 资源 
管理 器 的 文件 拖 彼 功能 即 可 进行 数据 恢复 。 通 过 设置 远 端 站 点 或 配置 AWS、Azure 公 有 云 ， 可 以 把 数据 备份 到 其 他 站 点 或 者 公有 云 平台 之 上 ， 其 架构 如 图 7-4 所 示 。 


` 基于 同步 和 异步 复制 的 灾难 恢复 解决 方案 。 对 于 Nutanix 而 言 ， 其 提供 的 Metto Availabilty 技 术 是 一 种 跨 数 据 中 心 的 同城 容 灾 方案 。 主 站 点 和 次 站 点 中 间 的 网 络 延 迟 要 求 小 于 5ms ， 通 过 同步 
复制 技术 ， 实 现 两 个 数据 中 心 数 据 的 持续 数据 保护 。 借 助 VYMware vSphete 的 HA 机 制 ， 可 以 让 两 个 数据 中 心 的 虚拟 化 环境 实现 相互 的 备 援 ， 当 主 站 点 出 现 故 障 后 ， 在 主 站 点 上 运行 的 所 有 虚拟 机 会 
自动 在 次 站 点 上 重新 开机 (通过 HA 机 制 实现 ， 虚 拟 机 数据 一 直 实 时 复制 到 对 方 站 点 实现 数据 高 可 用 ) ， 如 图 7-5 所 示 。 
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图 7-5 Metro Availability 架 构 


对 于 不 满足 数据 中 心 之 间 网 络 要 求 的 企业 ， 可 以 采用 异步 复制 技术 来 实现 数据 7 和 系统 容 灾 。 异 步 复 制 技术 应 用 广泛 ， 无 论 是 同城 、 异 地 、 跨 国 ， 异 步 复 制 都 是 一 种 更 具 扩展 性 的 选择 。 异 步 


复制 技术 支持 复杂 的 网 络 结构 和 数据 中 心 复 制 关系 ， 如 一 对 多 、 多 对 一 、 一 对 一 、 多 对 多 。 


通过 Nutanix 内 置 的 数据 保护 组 件 和 应 用 可 移动 性 框架 (AMF) ， 可 以 实现 在 不 同 的 虚拟 化 Hypervisor 之 间 进 行 异步 数据 复制 ， 以 实现 跨 集群 、 跨 Hypervisor 的 备份 和 容 灾 保护 ， 如 图 7-6 
所 示 。 
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图 7-6 GRADER 


7.2.2 Nutanix 数 据 保 护 市 来 的 优势 
通过 Nutanix 内 置 的 备份 和 容 灾 功能 ， 结 合 高 效 的 快照 、 克 隆 和 复制 技术 以 及 高 弹性 、 可 扩展 的 基础 架构 ， 可 以 实现 更 高 性 价 比 的 数据 保护 ， 降 低 成 本 和 管理 开销 。 同 时 Nutanix 也 可 以 与 
第 三 方 备份 方案 配合 以 满足 客户 的 异 构 平台 的 统一 备份 需求 。Nutanix 数 据 保 护 功 能 有 如 下 优势 : 
采用 以 VM 为 中 心 的 策略 ，Nutanix 通 过 保护 域 把 有 相同 数据 保护 需求 的 VM 分 组 。 
- 支持 VMware vSphere, Microsoft Hyper-V 和 Nutanix AHV 等 虚拟 化 平台 。 跨 虚拟 化 平台 的 数据 保护 功能 不 仅 可 以 支持 各 种 Hypervisot 平 台 上 VM 的 数据 保护 ， 还 可 以 实现 跨 平 台 备份 和 容 灾 


通过 Prism 统 一 界面 集中 管理 ， 减 少 管理 复杂 度 。 
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- 基于 策略 的 数据 保护 满足 不 同 工 作 负 和 载 的 不 同 SLA 需 求 。 


E 


i i REST API 调 用 。 


高 效 的 复制 ， 结 合 重复 数据 删除 和 压缩 技术 可 以 减少 数据 传输 和 节约 空间 ， 并 可 结合 容量 预测 功能 为 系统 扩容 提供 科学 依据 。 


7.3 ”桌面 虚拟 化 方案 


随 着 企业 对 桌面 系统 的 安全 管控 、 集 中 运 维 要 求 的 提高 ， 桌 面 虚拟 化 已 经 成 为 企业 内 部 重要 的 应 用 之 一 。 但 是 基于 传统 三 层 染 构 构 建 的 桌面 虚拟 化 项 目 往往 效果 不 尽 如 人 人意。 例如， 前 期 规 
划 设 计 复杂 、 使 用 过 程 容易 出 现 性 能 瓶颈 (如 启动 风暴 、 访 问 风暴 等 ) 、 进 行 桌面 扩展 时 需要 添加 新 的 服务 器 和 存储 设备 、 运 维 难度 大 ， 等 等 。 


7.3.4 Nutanix ff RAEE 


Nutanix 企 业 云 平台 支持 业界 主流 的 桌面 虚拟 化 软件 如 VMware Horizon 及 Citrix XenDesktop。 通 过 Web-scale 技 术 在 企业 级 的 应 用 ，Nutanix 企 业 云 平 台 可 提供 完全 分 布 式 的 桌面 虚拟 化 
基础 架构 ， 实 现 线性 扩展 桌面 虚拟 化 数量 、 容 量 和 性 能 ， 提 升 桌面 虚拟 化 基础 架构 的 弹性 和 用 户 使 用 体验 。 通 过 软件 定义 技术 消除 了 硬件 的 单 点 故障 ， 提 高 了 整体 平台 的 可 靠 性 ， 同 时 还 降低 了 
平台 管理 的 复杂 度 ， 减 轻 了 桌面 管理 人 员 的 维护 成 本 。 如 图 7-7 所 示 ， 通 过 4U 空 间 就 可 以 承载 大 量 的 虚拟 桌面 以 及 虚拟 桌面 环境 所 需 的 管理 服务 器 。 
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图 7-7 基于 Nutanix 架 构 构 建 的 虚拟 桌面 环境 


Nutanix 企 业 云 平台 通过 提供 多 种 领先 技术 和 高 级 特性 ， 改 善 桌面 虚拟 化 环境 下 的 用 户 体 验 。 


影子 克隆 技术 通过 自动 化 的 |/O 监 控 技 术 ， 上 自动 判断 桌面 虚拟 化 中 的 主 镜像 ， 并 将 主 镜 像 缓存 到 集群 的 所 有 节点 中 。 影 子 克 隆 技术 可 以 均衡 虚拟 桌面 对 于 主 镜 像 的 /0 访问， 减少 了 主 镜像 文 
件 的 MO 和 网 络 流量 ， 使 得 用 户 体验 更 加 平滑 和 流畅 ， 尤 其 是 在 启动 风暴 、 访 问 风 暴 等 情况 下 ， 改 善 更 加 明显 。 图 7-8 列 出 了 影子 克隆 的 工作 原理 。 


当 检 测 到 两 个 远 端 ( CVM ) 访问 主 镜 像 ， 主 镜像 按照 读 请 求 将 磁盘 数据 缓存 到 
AC N 每 个 节点 本 地 
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图 7-8 ”影子 克隆 原理 
通过 使 用 影子 克隆 技术 ， 在 虚拟 桌面 发 生 启动 风暴 时 ， 虚 拟 机 启动 时 间 可 缩短 50%。 如 图 7-9 所 示 。 


时 间 越 少 越 好 虚拟 机 启动 时 间 
( 7 节点 集群 ) 
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所 有 虚 拟 机 局 动 时 间 


150 200 250 
启动 虚拟 机 数量 


适用 于 XenDesktopMCS 和 VMware Linked Clones & App Volumes 


节省 50% 的 局 动 时 间 


图 7-9 ”使 用 影子 克隆 技术 降低 桌面 启动 时 间 


任何 企业 或 者 组 织 都 有 文件 或 者 数据 的 共享 需求 ， 如 IT 环境 中 的 用 户主 目录 和 用 户 数据 ， 或 者 是 部 门 内 部 用 户 之 间 的 文件 分 享 。Acropolis 文 件 服务 (AFS) 将 Nutanix 平 台 当 作 一 个 分 布 式 
高 可 用 的 文件 服务 器 。 用 户 可 以 在 一 个 单一 命名 空间 中 存储 主 目录 和 文件 。 


Acropolis 文 件 共 享 服务 可 以 与 桌面 虚拟 化 环境 共享 一 套 基础 架构 ， 实 现 文 件 共享 服务 ， 集 中 存储 用 户主 目录 、 配 置 文件 和 数据 ， 消 除了 NAS 设 备 的 使 用 ， 降 低 了 桌面 虚拟 化 环境 管理 复杂 
度 和 采购 成 本 ， 同 时 提高 了 业务 灵活 性 。 管 理 员 可 以 使 用 Nutanix 管 理解 决 方案 Prism 部 署 并 管理 AFS。 图 7-10 展 示 了 AFS 与 虚拟 桌面 结合 使 用 的 场景 。 


A7-10 ”AFS 与 虚拟 桌面 结合 使 用 示意 图 


7.3.2 ”Nutanix 为 桌面 虚拟 化 带 来 的 优势 


Nutanix 支 持 当 前 主流 的 桌面 虚拟 化 软件 ， 使 用 Web-Scale 技 术 实 现 了 吕 面 虚拟 化 环境 的 按 需 购买 ， 以 及 容量 和 性 能 的 线性 增长 ， 支 持 从 小 规模 节点 起 步 ， 扩 展 到 上 万 个 桌 面 的 环境 ， 消 除 
了 传统 架构 下 单 点 性 能 瓶颈 和 可 能 市 来 的 扩容 风险 ， 使 得 桌面 虚拟 化 项 目 可 以 更 加 简便 地 运 维 ;Nutanix 将 虚拟 化 、ABS 服 务 、 文 件 服务 、 容 器 服务 集成 在 同一 套 平台 上 ， 消 除了 传统 环境 下 
SAN 存 储 、NAS 和 存储 等 竖井 式 的 设备 孤岛 ，IT 管 理 员 使 用 同一 套 设备 即 可 完成 数据 中 心 的 IT 建 设 ， 降 低 了 运 维 成 本 。 


Nutanix 设 备 在 2U 空 间 提供 4 节点 运算 存储 能 力 ， 可 以 为 介 面 虚拟 化 环境 大 幅 节 省 空间 、 电 力 开销 ， 提 升 数据 中 心虚 拟 桌 面 承 载 密 度 ， 降 低 单个 虚拟 桌面 总体 拥有 成 本 。 


Nutanix 支 持 在 同一 集群 中 混合 多 种 节点 型 号 ， 如 在 同一 个 集群 中 同时 使 用 支持 计算 存储 均衡 的 NX3060 系 列 、 支 持 GPU 的 NX3155G 或 NX3175 系 列 、 支 持 存储 成 本 优化 的 NX6000 系 列 ， 
以 降低 用 户 采 购 成 本 。 


影子 克隆 、 人 存储 负载 Offload 等 技术 的 使 用 ， 可 以 紧密 联系 桌面 虚拟 化 软件 和 底层 平台 ， 优 化 用 户 体验 ; 压缩 、 重 复数 据 删除 等 容量 优化 特性 可 以 提高 环境 整体 空间 利用 率 ， 降 低 TCO。 


7.4 大 数据 平台 


大 数据 已 经 是 近 几 年 企业 IT 重点 关注 的 应 用 趋势 乙 一 。 大 数据 平台 可 以 帮助 企业 提升 自身 运营 数据 的 能 力 ， 降 低 成 本 ， 提 升 竞争 力 。 而 传统 的 商业 智能 工具 逐渐 显示 出 无 法 胜任 数据 规模 几 
何 增长 的 处 理 要 求 ， 如 统计 速度 慢 、 结 果 保守 单一 。 同 时 ，Google 等 大 型 企业 开始 使 用 大 量 创新 性 的 规模 数据 处 理 方 法 和 工具 管理 其 业务 创造 的 大 量 数据 。 


2004 年 ， 由 Google 提 出 的 MapReduce 技 术 ， 可 以 使 用 并 行 处 理 模型 快速 处 理 大 量 数据 ， 从 而 跨 多 个 服务 器 和 存储 实现 分 布 式 数据 处 理 ， 这 标志 着 现代 大 数据 运动 的 诞生 。Apache 
Hadoop 是 MapReduce 最 著名 的 实现 ， 并 形成 了 工具 和 应 用 的 生态 系统 ， 帮 助 用 户 了 解 和 处 理 不 断 增长 的 海量 数据 。 但 是 传统 大 数据 平台 基于 传统 架构 构建 ， 空 间 占 用 大 ， 部 署 速 度 慢 ， 弹 
性 、 可 用 性 及 效率 都 很 低下 。 


7.4.1 Nutanix 节 约 大 数据 平台 运 维 成 本 


Nutanix 采 用 Web-Scale 的 互联 网 设计 理念 ， 无 共享 架构 结合 智能 数据 把 放 、 性 能 自动 分 层 及 多 重 可 靠 性 保护 等 特征 设计 出 企业 云 平 台 。 由 于 Hadoop 和 其 他 大 型 数据 软件 框架 使 用 类 似 的 
原理 ， 因 此 可 以 从 Nutanix 企 业 云 平台 架构 特性 中 获 和 益 。Nutanix 提 供 了 服务 器 虚拟 化 和 共享 存储 的 灵活 性 和 简单 性 ， 而 不 会 影响 性 能 ， 并 简化 了 大 规模 节点 部 署 和 管理 的 开销 ， 其 架构 如 图 7- 
11 所 示 。 
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图 7-11 基于 Nutanix 构 建 的 大 数据 平台 


Nutanix 企 业 云 平 台 提 供 独 特 的 数据 本 地 化 技术 ， 将 大 数据 应 用 需要 处 理 的 海量 数据 分 散在 集群 的 所 有 节点 中 ， 用 户 可 以 使 用 集中 视图 管理 分 布 式 数据 ， 整 个 过 程 通 过 智能 化 信息 生命 周期 
管理 服务 自动 完成 ， 相 比 传统 部 署 方式 ， 得 益 于 SSD 层 ， 提 升 性 能 的 同时 也 让 管理 更 加 便捷 。 


Nutanix 企 业 云 平台 提供 免费 的 企业 级 虚拟 化 平台 AHV， 相 比 传统 虚拟 化 软件 ，AHV 与 Nutanix 底 层 分 布 式 存储 架构 DSF 以 及 管理 界面 Prism 有 机 集成 ， 使 管理 过 程 更 加 简单 。AHV 将 虚拟 
化 大 数据 应 用 程序 的 关注 点 从 底层 平台 上 升 到 应 用 程序 ， 无 须 虚 拟 化 专业 人 员 的 介入 ， 部 署 更 容易 ， 非 常 适用 于 大 数据 应 用 。Nutanix 企 业 云 平台 提供 智能 化 容量 趋势 分 析 和 一 键 式 即 时 规划 功 
能 。 容 量 趋 势 分 析 通 过 对 用 户 使 用 趋势 的 判断 ， 提 前 预测 大 数据 分 析 平 台 的 资源 使 用 情况 ， 避 免 出 现 资源 不 足 对 业务 的 影响 ， 一 键 式 即 时 规划 功能 可 以 帮助 大 数据 分 析 平 台 的 运 维 人 员 将 新 业务 
上 线 的 评估 规划 极 大 简化 ， 将 运 维 人 员 的 精力 和 时 间 释 放 到 更 加 重要 的 系统 运 维 或 者 新 项 目 建设 中 。 


7.4.2 ”Nutanix 为 大 数据 平台 市 来 的 估 势 

Nutanix 企 业 云 平台 让 管理 员 可 以 将 大 数据 应 用 当成 常见 的 企业 应 用 一 样 进行 运 维 管理 ， 无 须 关注 大 数据 应 用 和 底层 硬件 之 间 的 兼容 性 ， 简 化 了 大 数据 运行 环境 的 管理 复杂 度 。 同 
时 ，Nutanix 还 可 以 为 大 数据 平台 带 来 以 下 优势 

“ 一 键 式 升级 大 数据 平台 基础 架构 : 一 键 式 硬件 固件 、 虚 拟 化 软件 、 存 储 控制 器 升级 。 升 级 工作 完全 在 线 ， 不 影响 大 数据 分 析 应 用 的 运行 。 

- 无 虚拟 化 平台 开销 : 企业 级 虚拟 化 平台 AHV 已 经 包含 在 所 有 的 Nutanix 集 群 中 ， 集 成 了 高 可 用 及 动态 资源 调度 等 功能 ， 并 且 完 全 免费 。 


数据 本 地 化 功能 优化 Hadoop 运 行 : Nutanix 是 唯一 提供 了 数据 本 地 化 的 厂商 ， 数 据 本 地 化 可 以 优化 Hadoop 运 行 。 通 过 Nutanix 企 业 云 平台 轻松 扩展 集群 ， 即 可 得 到 性 能 的 持续 增长 并 能 支持 
最 新 的 Apache Hadoop 软 件 。 


- 提升 硬件 利用 率 : 根据 Gattnet 统 计 ， 裸 机 部 署 Hadoop 集 群 的 平均 CPU 利用 率 在 10% 一 20%， 浪 费 了 硬件 资源 及 数据 中 心 空 间 。 虚 拟 化 Hadoop 能 够 获得 更 好 的 硬件 利用 率 及 灵活 性 。 
高 性 能 : 在 2U4 节 点 的 集群 中 实现 高 达 3500 MB/s 的 顺序 吞吐 。 


. 工作 负载 灵活 调度 ， 提 升 资源 使 用 效率 : Nutanix 企 业 云 平台 允许 运行 所 有 的 工作 负载 和 应 用 ,例如 Hadoop、 虚 拟 桌 面 和 服务 器 能 够 共同 存在 。 通 过 调配 ， 可 以 让 大 数据 分 析 作 业 在 非 峰 值 
时 间 运 行 ， 以 避免 资源 的 浪费 。 


Nutanix 企 业 云 平 台 模块 化 横向 扩展 方案 使 得 大 数据 应 用 能 够 选择 任何 初始 部 署 规模 ， 并 以 更 细 粒 度 的 增 量 增 长 ， 消 除了 可 能 要 耗 时 数 月 的 前 期 基础 设施 购买 和 部 署 的 障碍 ， 从 而 确保 大 数 
据 项 目 实施 更 快 、 价 值 实现 周期 更 短 。 


15 “分 文 机 构 方 案 


远程 办 公 室 或 分 支 机 构 广 泛 存 在 于 大 型 企业 与 组 织 中 ， 如 银行 营业 网 点 或 者 企业 的 办 事 处 、 子 公司 等 。 由 于 多 种 原因 ， 这 些 分 支 机 构 无 法 将 所 有 应 用 均 部 署 在 总 部 数据 中 心中 ， 例 如 互联 网 
延迟 较 大 ， 网 络 传输 速度 慢 ， 专 线 费 用 昂贵 ， 等 等 。 但 在 分 支 机 构 进 行 本 地 数据 中 心 部 署 义 会 融 来 新 的 问题 ， 比 如 传统 染 构 过 于 复杂 ， 成 本 高 且 难 于 维护 ， 需 要 分 支 机 构 配 备 专 业 的 IT 技 术 人 
员 ， 对 于 分 支 机 构 进行 数据 备份 和 容 灾 方 案 复杂 度 过 高 ， 等 等 。 


了 


7.5.1 _ Nutanix 打 造 简约 的 分 文 机 构 IT 环 境 


Nutanix 企 业 云 平台 完全 消除 了 传统 SAN 人 存储 及 SAN 网 络 的 使 用 ， 通 过 标准 x86 服 务 器 和 标准 以 太 网 络 协同 工作 文 持 应 用 运行 ， 通 过 一 键 式 产 品 设计 理念 简化 了 IT 环境 的 管理 要 求 。 


分 文 机 构 管理 中 普遍 存在 IT 预算 有 限 和 专业 |T 技 能 不 足 的 情况 ，Nutanix 为 分 文 机 构 寓 来 强大 的 超 融合 方案 。 该 解决 方案 提供 了 易于 管理 、 软 件 驱 动 、 线 性 伸缩 的 企业 级 功能 。 在 2U 空 间 内 
可 以 支持 包括 桌面 虚拟 化 、 业 务 应 用 、 文 件 服务 器 、 打 印 、DHCP、DNS 等 应 用 ， 此 外 也 可 以 支持 如 防火 墙 、VPN 和 广域网 优化 等 网 络 服务 。 


通过 Prism Central 管 理 控制 台 ， 可 以 对 分 支 机 构 基 础 架构 进行 集中 管控 ， 包 括 性 能 指标 排名 、 容 量 趋势 分 析 、 故 障 和 警告 、 可 视 化 事件 分 析 、 批 量 处 理 (甚至 是 批量 集群 升级 ) 等 ， 如 图 7- 
12 所 示 。Prism Central 控 制 台 使 得 IT 管 理 员 无 须 面 对 分 支 机 构 IT 环 境 的 复杂 管理 ,减轻 了 多 分 支 机 构 环 境 的 IT 管 理 的 难度 ， 降 低 了 管理 成 本 。 
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主 仪表 板 Test Dashboard 屏幕 展示 从 管理 仪表 板 + 重 置 仪表 板 + 添加 小 部 件 


受 影响 的 集群 集群 快速 访问 集群 存储 任务 
Branch-ESX-2 (=) 2.26:1 
B ra n C h- ESX-1 BigCloud-AHV-1 L ece Cluster upgrade task 100% O 
BigCloud-AHV-1 emm 1:1 
al - en 
警报 eae CD EBD EB ™™ T 
BigCloud-AHV-1 emm 1:1 
存储 
延迟 O ms 
IOPS 
集群 运行 轨迹 集群 CPU 使 用 率 集群 内 存 使 用 率 集群 延迟 
BigCloud-AHV-1 To] O days BigCloud- Pe ae a à BigCloud- €———— o BigCloud- pr — 9 
AE 83.05% AU 68.04% Awa 2.24 ms 
Branch-ESX-1 To] O days 
BigCloud- m BigCloud- is BigCloud- 
E A 83.05% pe 68.04% AEN 2.24 ms 
Branch-ESX-2 i 359+ days 


Branch-ESX-2 一 一 一 一 一 48.95% Branch-ESX-2 一 一 人 一 一 一 人 1576% 
控制 器 IOPS 


BigCloud- 


AHV-1 /NN IOPS 


图 7-12 Prism Centtal 控制 台 


AHV 为 分 支 机 构 提 供 了 完全 免费 的 虚拟 化 平台 解决 方案 ， 其 中 包含 的 高 可 用 功能 可 以 自主 修复 故障 系统 ， 而 资源 动态 调度 功能 不 仪 可 以 探测 到 计算 资源 热点 ， 还 可 以 探测 到 i/O 热 筷 ， 实 现 
自动 化 调整 运行 环境 到 最 优 状 态 ， 完 全 无 须 人 工 干 预 ， 大 大 降低 了 分 支 机 构 IT 环 境 的 运 维 难度 。 


Nutanix 企 业 云 平台 提供 包括 本 地 备份 、 远 程 备份 和 容 灾 复制 的 集成 数据 保护 方案 ， 并 可 以 实现 集中 的 备份 和 灾难 恢复 管理 。Nutanix 时 间 流 (Time Stream) 功能 允许 在 本 地 集群 上 创建 
无 限制 的 虚拟 机 快照 ， 以 实现 数据 的 本 地 备份 和 恢复 。 通 过 云 连接 可 以 将 分 支 机 构 的 数据 备份 到 用 户 的 公有 云 账 户 中 ， 以 备 后 期 恢复 使 用 。 通 过 异步 复制 功能 可 以 将 分 支 机 构 本 地 集群 数据 容 灾 
复制 到 总 部 数据 中 心 ， 或 者 复制 到 本 地 的 单 节操 备份 目标 上 。 


如 图 7-13 所 示 ， 通 过 将 大 容量 的 NX6000 系 列 节 点 部 署 在 总 部 数据 中 心 ， 可 以 将 适用 于 分 支 机 构 的 NX1000 系 列 节 点 部 署 在 不 同 的 远程 分 支 机 构 ， 用 户 可 以 在 其 生产 集群 上 保留 多 个 快照 ， 
并 在 需要 时 快速 恢复 虚拟 机 或 文件 。 使 用 Prism 控 制 台 ， 用 户 可 以 调度 本 地 快照 和 复制 任务 ， 并 为 快照 单独 设置 保留 策略 。 通 过 直观 的 快照 浏览 器 可 以 快速 查看 本 地 和 远程 快照 ， 并 可 通过 一 次 
拟 击 恢复 虚拟 机 或 检索 保存 的 快照 。 
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图 7-13 2r: LSU] BAAS 


Nutanix 强 大 的 数据 保护 能 力 和 简便 的 操作 模式 使 得 分 支 机构 的 数据 可 靠 性 和 可 用 性 显著 提升 。 相 对 于 传统 方案 ，Nutanix 对 于 分 支 机 构 的 数据 保护 管理 更 加 简单 易 用 。 


7.5.2 Nutanix 为 分 广 机 构 上 环境 市 来 的 优势 


Nutanix 企 业 云 平 台 可 以 为 分 支 机 构 的 IT 环 境 市 来 如 下 的 优势 : 
* 支持 各 类 应 用 负载 : 可 以 支持 分 支 机 构 中 的 所 有 虚拟 工作 负载 。 
. 优化 集中 管理 : 单一 界面 远程 管理 多 集群 环境 ， 简 化 IT 管理 。 
` 节省 空间 和 电力 : 节省 分 支 机 构 的 空间 和 电力 成 本 。 
: 提升 业务 连续 性 : 内 置 虚拟 化 环境 量 身 定制 的 备份 和 容 灾 功 能 ， 实 现 数据 及 应 用 的 保护 。 


- 降低 基础 架构 需求 : 灵活 运用 典型 的 分 支 机 构 机 房 和 网 络 基础 设施 (支持 千 兆 以 太 网 ) ， 以 降低 部 署 成 本 。 


7.6 ”开发 测试 环境 


随 着 信息 技术 的 深入 应 用 ， 企 业 对 于 IT 技 术 产 生 的 效果 抱 有 更 高 的 期 待 。 然 而 ， 新 应 用 的 交付 受到 诸多 因素 的 制约 和 限制 ， 如 应 用 达 代 周期 过 长 制约 了 业务 的 友 展 ， 开 发 测试 环境 因为 资源 
申请 流程 复杂 、 性 能 或 设备 不 足 ， 影 响 了 开发 测试 的 进度 ， 等 等 。 因 此 ， 只 有 为 开发 测试 环境 提供 更 加 高 效 、 敏 捷 、 可 扩展 的 基础 设施 ， 才 可 以 确保 业务 系统 的 按期 交付 和 平稳 运行 。 


7.6.1 ”通过 企业 云 架 构 开发 测试 环境 


高 效 运 行 的 开发 测试 环境 离 不 开 稳健 的 基础 架构 ， 超 融合 架构 为 开发 测试 环境 提供 必要 的 高 性 能 和 可 靠 性 ， 以 支持 开发 测试 环境 所 需 的 各 类 应 用 负载 ， 如 : 通过 在 超 融合 洪 构 上 部 署 虚拟 桌 
面 保证 企业 对 代码 安全 的 管理 要 求 ; 为 开发 测试 环境 提供 文件 服务 器 和 代码 服务 器 ; 在 系统 的 交付 环节 通过 基于 存储 优化 的 克隆 技术 快速 地 置 备 生产 服 务 器 ; 与 当前 主流 的 容器 技术 结合 实现 基 
于 容器 的 应 用 交付 。 在 数据 保护 方面 可 通过 Nutanix 内 置 的 数据 保护 功能 实现 数据 中 心间 的 复制 ， 以 提供 基于 站 点 的 容 灾 和 解决 方案 。 


此 外 ，Nutanix 企 业 云 平台 提供 的 自助 服务 门户 功能 ， 可 以 满足 开发 测试 环境 中 不 同 项 目 组 进行 资源 自助 申请 的 需求 ， 经 过 授权 的 项 目 组 成 员 可 以 自助 地 完成 虚拟 机 的 创建 与 管理 ， 消 除了 
以 往 需 要 单独 向 IT 部 门 申请 资源 和 等 待 管理 员 手 工 创建 、 分 配 资源 所 花费 的 时 | 间 。 上 自助 门户 的 工作 示意 图 如 图 7-14 所 示 。 
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图 7-14 不 同业 务 部 门 通 过 自助 门户 申请 和 管理 资源 


7.6.2 Nutanix 云 平台 为 开 友 测 试 环境 市 来 的 优势 


在 Nutanix 云 平台 上 部 署 开发 测试 环境 可 以 提供 诸多 的 优势 : 

` 通过 构建 开发 测试 资源 池 ， 可 以 有 效 地 提高 各 类 资源 的 利用 率 。 其 提供 的 一 键 式 管 理 功能 可 以 让 开发 测试 部 门 专注 于 自身 的 业务 ， 而 非 基础 架构 本 身 。 

. 无 论 是 虚拟 桌面 、 鹿 拟 服务 器 、 容 器 ， 均 可 在 同一 个 平台 上 运行 ， 节 省 了 集成 和 管理 零散 的 方案 所 花费 的 时 间 及 资金 成 本 。 

- 针对 开发 测试 环境 的 特点 ， 可 以 在 同一 架构 上 分 时 处 理 不 同 的 业务 ， 如 和 白天 通过 交付 虚拟 桌面 允许 开发 测试 人 员 进 行程 序 的 开发 和 测试 ， 非 高 峰 时 段 自 动 化 地 进行 程序 编译 和 压力 测试 。 
当 开 发 测试 人 员 和 业务 需求 增加 时 ， 人 和 借助 Nutanix 提 供 的 横向 扩展 能 力 让 管理 员 通过 添加 新 节点 的 方式 完成 计算 、 存 储 资 源 的 扩容 ， 所 提供 的 性 能 和 容量 是 线性 增长 和 可 预测 的 。 

. 结合 分 布 式 存储 和 虚拟 化 的 优势 ， 可 以 提供 宛 余 的 数据 和 应 用 保护 ， 在 任 一 组 件 、 硬 盘 、 节 点 ， 甚 至 是 机 箱 出 现 故 障 时 都 不 会 影响 用 户 的 使 用 。 

通过 自助 服务 方式 交付 IT 服 务 ， 减 少 了 管理 员 手 工 供应 资源 的 工作 量 ， 业 务 部 门 可 以 最 快 的 速度 得 到 所 需 的 资源 以 进行 开发 测试 ， 从 而 缩短 新 应 用 的 上 线 时 间 。 

云 平 台 提供 的 资源 规划 和 分 析 能 力 ， 根 据 应 用 增长 情况 和 性 能 趋势 自动 地 判断 资源 瓶颈 并 给 出 推荐 建议 ， 可 以 让 IT 部 门 更 加 科学 地 做 出 管理 和 采购 决策 。 


` 超 融 合 架 构 提 供 的 高 性 能 和 扩展 能 力 ， 可 以 支持 更 快 的 应 用 迭代， 消除 资源 约束 。 


附录 A ” 超 融 合 系统 评 信 要 后 


了 解 了 超 融 合 系统 的 定义 ， 以 及 主流 厂商 之 后 ， 更 为 关键 的 是 需要 知道 如 何 选择 一 套 适 用 于 业务 环境 的 超 融 合 系统 ， 从 哪些 方面 来 评估 超 融 合 系统 的 优 务 。 


首先 ,评估 一 套 超 融 合 系统 的 优 劣 ， 要 看 其 能 否 真正 满足 超 融 合 最 基本 的 要 素 ， 也 就 是 需要 满足 前 面 章 节 中 提 到 的 超 融 合 系统 的 定义 ， 即 超 融 合 系统 是 一 个 软件 定义 的 可 灵活 配置 ， 随 需 扩 
容 的 全 堆栈 IT 基础 设施 ， 可 以 包含 但 不 限于 如 下 组 件 : 标准 化 的 COTS (Commercial-Off-The-Shelf) 硬件 环境 ， 软 件 定义 计算 (Hypervisor) ， 软 件 定义 存储 (SDS) ， 软 件 定义 网 络 
(SDN) 以 及 统一 的 管理 控制 中 心 (Management System) ， 上 述 各 组 件 间 解 厢 ， 可 以 灵活 组 合 ， 随 需 配 置 ， 所 有 组 件 均 实现 完全 分 布 式 ， 不 存在 单 点 故障 。 


其 次 ， 我 们 可 以 定义 一 套 完整 的 技术 规范 来 逐 项 评估 起 融 合 系统 的 优 务 ， 笔 者 试 着 总 结 第 三 方 研究 机 构 以 及 各 厂商 所 提出 的 技术 体系 ， 梳 理 并 汇 轧 出 如 表 A-1 所 示 的 技术 规范 ， 以 供 大 家 参 
考 ， 并 能 应 用 于 实际 业务 场景 的 选 型 和 建设 之 中 。 


表 A-1 技术 规范 
说 — B8 
从 供应 商 实力 ， 技 术 先进 性 ， 市 场 占有 率 以 及 案例 数量 等 维度 评估 
解决 方案 的 优 劣 
通过 供应 商 所 提供 的 解决 方案 发 布 时 间 ， 发 布 版 本 及 特性 更 新 频率 
来 评估 解决 方案 的 成 熟 度 
硬件 设备 定价 模式 解决 方案 的 硬件 部 分 的 定价 模式 ， 来 评估 解决 方案 的 成 本 组 成 
模式 解决 方案 的 软件 部 分 的 定价 模式 ， 来 评估 解决 方案 的 成 本 组 成 
解决 方案 的 服务 支持 的 定价 模式 ， 来 评估 解决 方案 的 成 本 组 成 


定价 


( 2E ) 
说 明 

评估 解决 方案 所 包含 的 方案 架构 范围 是 否 完整 ， 如 是 否 提 供 如 下 组 
件 或 方案 : 虚拟 化 (Hypervisor)， 计 算 ( Compute )， 存 储 (Storage), 
数据 保护 ( Data Protection)， 统 一 管理 平台 (Management Platform) 
以 及 自动 化 和 编排 工具 (Automation & Orchestration ) 

评 佑 供应 商 可 以 提供 的 采购 前 的 评测 手段 是 否 完备 ， 能 否 提供 多 样 
化 的 评测 手段 ， 如 社区 版 、PoC 设备 、 在 线 Demo 环境 等 

评 佑 供应 商 所 提供 的 解决 方案 部 署 方式 ， 是 否 为 交 钥 是 工程 ， 能 和 否 
提供 高 效 的 出 厂 预 配置 ， 现 场 部 署 效 率 如 何等 

供应 商 所 提供 的 解决 方案 可 支持 的 部 署 架 构 ， 即 解决 方案 是 否 可 以 
满足 及 支持 计算 与 存储 资源 分 离 式 的 两 层 黑 构 部 署 ， 又 文 持 计算 和 存 
储 合 并 式 的 单 层 部 署 

供应 商 所 提供 的 解决 方案 支持 的 网 络 类 型 ， 如 1GbE、10GbE 或 
40GbE 

虚拟 化 Hypervisor 支持 | 供应 商 所 提供 的 解决 方案 支持 的 虚拟 化 Hypervisor 类 型 ， 如 VMware 
能 vSphere, Microsoft Hyper-V, Citrix XenServer 及 日 有 Hypervisor 

供应 商 所 提供 的 解决 方案 中 的 Controller 形态 ， 是 采用 预 配置 的 虚 
拟 机 ， 还 是 与 Hypervisor 集成 

供应 商 所 提供 的 解决 方案 针对 裸 设 备 访问 的 文 持 能 力 ， 是 否 可 以 
文 持 裸 设备 环境 的 访问 ， 如 通过 iSCSI 协议 为 Microsoft Windows 
Server, Red Hat Enterprise Linux (RHEL), Oracle Linux, AIX 7.1/7.2 
on POWER, Oracle Solaris 11.3 on SPARC 等 平台 提供 裸 设备 访问 能 

Bt ng FT E BE PERT SR AEP OT R TE E I SCPE, HE AP SCHR AM 
R TE HEF EAS Be 7J VMware Horizon, Citrix XenDesktop 或 Workspot VDI 55 5& [fj He PAE 
解决 方案 

供应 商 所 提供 的 解决 方案 的 硬件 选 型 范围 ， 兼 顾 超 融合 系统 运行 稳 
定性 的 前 提 下 ， 能 和 否 提供 灵活 的 便 件 选 型 能 

评估 供应 商 所 提供 的 解决 方案 的 人 硬件 型 号 的 密度 ， 可 以 达到 每 U 单 
位 可 支持 多 少 颗 物理 CPU 

供应 商 所 提供 的 解决 方案 是 否 支 持 不 同型 号 或 类 型 的 人 硬件 部 署 在 同 
一 集群 之 中 ， 如 全 闪 架 构 的 人 硬件 与 混合 染 构 的 便 件 能 否 添 加 到 同一 集 
群 之 中 

供应 商 所 提供 的 解决 方案 的 便 件 可 支持 的 CPU 配置 能 力 ， 如 文 持 
哪些 类 型 的 CPU 架构 ， 如 Intel Xeon 系列 、IBM Power 系列 等 
内 存 配 置 能 供应 商 所 提供 的 解决 方案 的 便 件 对 内 存 的 支持 能 

供应 商 所 提供 的 解决 方案 的 人 硬件 对 存储 介质 的 支持 能 力 ， 如 固态 便 
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便 件 选 型 范围 


便 件 密度 


便 件 染 构 CPU 配置 能 


人 盘 或 机 械 磁 盘 数量 、 单 盘 容 量 等 

网 络 配置 能 供应 商 所 提供 的 解决 方案 的 硬件 对 网 络 适 配 卡 的 支持 能 力 ， 如 支持 
网 卡 的 数量 、 端 口 速 率 及 端口 类 型 

显卡 配置 能 供应 商 所 提供 的 解决 方案 的 人 硬件 对 显卡 的 支持 能 力 ， 如 显卡 的 类 


型 、 数 量 等 


ES 


类 a| a H —— LAE: 
ER à H tk H 82 Y / / AL WR . 
硬件 内 部 扩展 能 力 人 如 添加 内 存 
磁盘 扩容 等 
An kk +t 7 gr 是 供 的 解 ; 3] ` 全 已 , 、 、 T 
硬件 架构 资源 横向 扩展 能 供应 商 所 提供 的 解决 方案 的 集群 扩展 能 力 ， 如 单独 增加 计算 类 型 硬 


件 资源 ， 或 存储 类 型 硬件 资源 ， 或 添加 计算 和 存储 混合 型 便 件 资源 
便 件 规模 及 扩展 方式 供应 商 所 提供 的 解决 方案 的 最 小 规模 、 最 大 规模 以 及 每 次 扩展 的 方式 


供应 商 所 提供 的 解决 方案 的 数据 缓存 机 制 ， 是 否 采用 完全 分 布 式 的 
数据 缓存 机 制 cija 7 
数据 缓存 分 层 技术 ， 实 现 数据 多 层 缓存 
ea 供应 商 所 提供 的 解决 方案 的 磁盘 故障 切换 能 力 ， 可 容忍 的 磁盘 同时 
NUNT 发 生 故 障 的 数量 ， 以 及 磁盘 故障 发 生 后 ， 系 统 的 自 愈 能 
供应 商 所 提供 的 解决 方案 的 节点 故障 切换 能 力 ， 可 容忍 的 同时 发 生 
a ds E 
数据 可 用 性 | BRRR 故障 的 节点 数量 ， 以 及 节点 故障 发 和 后， 系统 的 自 全 能 


供应 商 所 提供 的 解决 方案 的 设备 或 机 架 故 障 切 换 能 力 ， 可 容忍 的 同 
设备 或 机 架 故 障 切 换 时 发 生 故 障 的 设备 或 机 架 数量 ， 以 及 设备 或 机 架 故 障 发 生 后 ， 系 统 的 
HAREJ 
数据 损坏 检测 机 制 供应 商 所 提供 的 解决 方案 是 否 支 持 数 据 损坏 检测 机 制 
供应 两 所 提供 的 解决 方案 是 否 文 持 快 照 ， 以 及 提供 的 快照 类 型 ， 是 
快照 支持 能 否 为 系统 原生 的 快照 ， 是 否 文 持 本 地 ， 或 远程 快照 等 ， 是 否 文 持 快 昭 
RAGA H XE X. 
数据 保护 能 供应 商 所 提供 的 解决 方案 的 备份 文 持 能 力 ， 备 份 对 象 的 类 型 ， 如 虚 
备份 支持 能 拟 机 ; 备份 的 目标 介质 ， 是 否 文 持 本 地 备份 ， 远 端 备份 或 者 公有 云 平 
台 的 备份 ; BRERA AE; 备份 数据 一 致 性 ， 备 份 数 据 恢 复方 式 ， 
是 否 文 持 虚 拟 机 用 户 目 助 恢复 等 
供应 商 所 提供 的 解决 方案 的 数据 复制 能 力 ， 是 否 提供 内 置 的 数据 复 
制 机 制 ， 是 否 支 持 单 站 点 或 多 站 点 为 目标 的 远程 复制 能 力 ， 数 据 复 制 
汞 上 略 的 日 定义 以 及 复制 对 象 ， 是 否 支 持 多 种 Hypervisor 集群 作为 复制 
容 灾 能 力 目标 ， 是 否 文 持 数据 一 致 性 组 (Consistency Group, CG) 的 设置 等 
供应 商 所 提供 的 解决 方案 的 双 活 集群 能 力 ， 是 否 提供 内 置 的 双 活 集 
双 活 集群 能 群 机 制 ， 双 活 集群 的 配置 需求 ， 如 网 络 时 延 或 市 宽 需 求 ， 集 群 厄 点 类 
型 及 配置 要 求 等 


供应 商 所 提供 的 解决 方案 是 否 提 供 完 整 的 重复 数据 删除 机 制 ， 重 复 
重复 数据 删除 数据 删除 机 制 文 持 便 件 无 天性 ; 文 持 多 层面 的 重复 数据 删除 ， 如 在 线 
数据 的 内 存 和 闪存 层 ， 持 久 数 据 的 机 械 磁 盘 层 ; 支持 逻辑 层面 定义 重 


复数 据 删 除 策 上 略 

供应 商 所 提供 的 解决 方案 是 否 提供 完整 的 数据 压缩 机 制 ， 数 据 压缩 
数据 压缩 机 制 文 持 便 件 无 天性; 文 持 多 层面 的 数据 压缩 能 力 ， 如 在 线 数 据 的 内 
存 和 闪存 层 ， 持 久 数 据 的 机 械 磁 盘 层 ; 文 持 逻辑 层面 定义 压缩 策略 
供应 商 所 提供 的 解决 方案 是 否 文 持 完整 的 纠 删 码 机 制 ， 以 提高 存储 


数据 服务 能 


ZU Hh fu 
# ]» | ij J T ZN AY ff 2 gi ES 是 TE AN H Jn Hi AE HS AN 2 fitr , | 


HEAT ERTS H BLIA F 
虚拟 机 快速 克隆 供应 商 所 提供 的 解决 方案 支持 虚拟 机 的 快速 克隆 


(ZÈ ) 


类 别 项 目 说 AA 
数据 加 密 能 力 供应 商 所 提供 的 解决 方案 是 否 文 持 完善 的 数据 加 密 ， 如 基于 SED 

加 蜜 磁盘 的 数据 加 蜜 机制 ， 以 保证 数据 的 安全 性 

供应 商 所 提供 的 解决 方案 是 否 提供 完善 的 路 Hypervisor 迁移 ， 实 现 
不 同 Hypervisor 间 的 转换 

供应 商 所 提供 的 解决 方案 是 否 提供 文件 服务 能 力 ， 提 供 内 置 的 分 布 
式 文件 服务 能 力 ， 以 满足 特定 业务 场景 对 文件 服务 的 需求 

供应 商 所 提供 的 解决 方案 是 否 文 持 统一 管理 面板 ， 提 供 单 站 点 或 多 
站 点 集群 管理 能 力 ， 是 否 文 持 监控 多 Hypervisor 集群 环境 

供应 商 所 提供 的 解决 方案 是 否 文 持 完 备 的 API 或 脚本 命令 工具 ， 如 
REST-APIs、CLI 工具 等 

供应 商 所 提供 的 解决 方案 是 否 文 持 内 置 的 日 服务 能 力 ， 如 面 品 虚拟 
BV sX tf hit ox Us B A HR AS BE 7 
全 组 件 一 键 式 升级 供应 商 所 提供 的 解决 方案 是 否 提 供 超 融合 系统 全 组 件 的 一 键 式 升级 

供应 商 所 提供 的 解决 方案 是 否 提 供 内 置 的 健康 分 析 工 具 ， 人 简化 运 维 
人 员工 作 难 度 

供应 商 所 提供 的 解决 方案 是 否 提供 完善 的 被 集成 能 力 ， 可 以 与 业界 
主流 的 解决 方案 进行 集成 ， 如 OpenStack 


数据 服务 能 路 Hypervisor 的 移动 性 


文件 服务 能 


统一 管理 面板 


提供 完备 的 API 


FAR HE 


me 
bami 
pa 
GC 
cr 


内 置 的 健康 分 析 工 具 


被 集成 能 


附录 B Nutanix 软 件 版 本 和 功能 划分 


B.1 Acropolis 软 件 版 本 和 功能 划分 


Acroplis 软 件 分 为 入 门 版 、 专 业 版 和 终极 版 。 入 门 版 涵盖 核心 的 软件 功能 ， 适 合 小 规模 部 署 和 有 限 的 工作 负载 ; 专业 版 涵盖 丰富 的 服务 、 可 用 性 和 管理 功能 ， 适 合 多 种 应 用 或 较 大 规模 的 工 
ERR, 终极 版 包括 Nutanix 的 全 栈 软 件 功 能 ， 适 合 多 站 点 的 部 署 和 更 高 级 的 安全 需求 。 各 版 本 的 区 别 如 表 B-1 所 示 。 


AB-1 Acropolis tk AW Ae 


"HET SEHR TIT 
企业 存储 
集群 规模 — s 支持 的 最 大 市 点 数 ， 同 一 集群 内 Hypervisor 
\ 同 型 号 、 不 后 全 闪 节 点 和 混合 节点 混合 在 同一 
虹 构 集群 管理 个 同 号 、 不 同年 代 、 全 闪 节 点 和 混合 节点 混合 在 同 
集群 内 
VM 为 对 象 的 快照 和 元 隆 ， 依据 Protection Domain 可 以 
Y nA UE 7: 

VM X POKI B HEURE v E 对 一 组 VM 同时 做 快照 

智能 冷 热 数据 分 层 ， 根 据 谈 取 情况 数据 将 
WE SSD 和 HDD 4 
FT SOC 22 fs 冷 热 数据 层 按 需 迁移 
在 线 压 缩 随机 数据 在 写 和 人 SSD 绥 存 层 时 立即 进行 压缩 包含 
在 线 重 复数 据 删 除 随机 数据 在 写 入 SSD 缓存 层 时 就 立即 进行 重复 数据 删除 包含 
在 线 集群 伸缩 文 持 在 线 增 加 删 减 节点 [1 包含 
Acroplis £i Jl 4$ 对 Docker 4 Ait HY SEF 包含 È 
Acroplis 块 服务 对 VM、 容 器 和 物理 服务 器 提供 iSCSI 服务 ”| 包含 | 包含 


( 2E) 


功 f 终极 版 


企业 存储 


Acroplis 文件 服务 提供 共享 的 分 布 式 文件 服务 ids ^ S 


MapReduce 压缩 ”后 处 理 容量 层 压缩 。 | — dR 包 合 
MapReduce 重复 数据 删除 MEE a 包含 


纠 删 码 ( Erasure Coding, pate HRA "ETUUTUER x 间 占用 ， 增 加 实际 数据 


VM 全 内 模式 将 VM pin 在 SSD 层 以 获得 高 性 能 ”| | ae 
基础 架构 可 用 性 
ews En CVM、 主 机 故障 时 可 利用 副本 和 链 路 宛 余 实现 高 
RF=2 或 3， 在 集群 部 署 时 选择 ， 后 期 可 调整 该 系数 ， 
可 油 元 余 系数 ee ee ad E Em 
Mum 机 箱 感知 ， 数 据 、 元 数据 、 集 群 配置 数据 保存 在 不 同 机 
箱 内 以 保障 机 箱 级 别 的 可 靠 性 域 
数据 保护 
异步 复制 和 灾难 恢复 使 用 异步 复制 方式 复制 数据 到 容 灾 集群 并 且 提 供 灾难 恢复 包含 
应 用 一 致 性 快照 与 应 用 相关 的 一 组 VM 获得 应 用 一 致 性 快照 包含 


存储 层 原生 的 快照 功能 (可 实现 较 高 频 度 的 快照 ) 
可 更 新 的 备份 计划 和 管理 
时 间 流 (Time Stream) 异 构 集 群 混合 ， 目 动 实现 集群 内 的 备份 包含 | 包含 | 包含 
本 地 备份 与 容 灾 恢 复 的 工作 流程 一 体 化 
各 他 点 虚拟 机 快照 的 均衡 存储 


自助 文件 恢复 用 户 自助 恢复 文件 |e | && 
云 连接 连接 到 公有 云 Azure 或 AWS 一 十 一 包含 
hem EX) A Xl ki ELATED ME VK FZ ea 包含 
城 域 高 可 靠 ESXi 集群 实现 RPO=0 的 同城 双 活 和 自动 化 灾难 站 点 切换 一 十 一 包含 


类 TE 
UNSERE 使 用 同步 复制 方式 复制 数据 到 容 灾 集 群 并 提供 灾难 恢复 EMEN "m 


(Hyper-V 和 ESXi 集群 文 持 ) 
安全 
用 户 鉴 权 用 户 鉴 权 RBAC 包含 
集群 锁定 开启 /关闭 远程 密码 登录 功能 ， 只 能 通过 Prism 登录 | | 包含 | 包含 
Data-at-Rest Encryption | ame Td &m& 
管理 和 分 析 
Pulse Nutanix Support 远程 监控 、 分 析 设 备 状态 


包含 
集群 健康 分 析 健康 度 分 析 包含 


一 键 升级 ( Nutanix OS& | 
对 AOS, Hypervisor, Foundation, Firmware 一 键 式 升级 | 包含 | 包含 | 包含 
Hypervisor) 


Rest APIs 提供 REST API 接口 包含 


EF 


"EE: 简要 解释 终极 版 
支持 虚拟 化 平台 
Nutanix AHV 内 置 基 于 KVM 的 虚拟 化 平台 


VMware ESXi 支持 VMware ESXi 虚拟 化 平台 
Microsoft Hyper-V 支持 Microsoft Hyper-V 虚拟 化 平台 
XenServer for Citrix 负载 | ”支持 XenServer 虚拟 化 平台 


^J Acropolis Hypervisor ( Nutanix AHV) 


vum wm 


Iy | > | >| > 


智能 VM 启动 放置 智能 VM 启动 放置 ， 避 免 集群 内 出 现 热点 主机 
VM 自动 资源 调度 VM 自动 动态 负载 均衡 


VM ea 
RM 
EOLA 
VM HA 


Hypervisor 转换 ESXi 虚拟 化 平台 一 键 式 转换 为 AHV 
BS Hypervisor 灾难 恢复 | 灾 备 站 点 使 用 异 构 的 AHV 集群 实现 容 灾 


MIMIMIDIMIVDIVM|VMIN|WIY 


SSP (自助 服务 门户 ) 通过 自助 服务 门户 申请 和 管理 资源 、 部 署 虚 拟 机 


B.2 Prism 软件 版 本 功能 划分 


Prism 软 件 分 为 入 门 版 和 专业 版 ， 入 门 版 提供 广泛 的 系统 管理 解决 方案 ， 适 合 Nutanix 集 群 单个 和 多 个 站 点 的 管理 。 专 业 版 有 更 强大 的 VM 运 维 管理 和 系统 管理 功能 ， 通 过 高 级 的 智能 机 器 学 
习 获 得 自动 化 分 析 和 预测 的 功能 ，Prism 软 件 的 版 本 区 别 如 表 B-2 所 示 。 


表 B-2 Prism 软 件 版 本 功能 


功 能 | 简要 解释 — | Anm | 专业 版 
一 键 式 基 础 架构 管理 
单 站 点 管理 对 单个 站 点 集群 进行 管理 
多 站 点 管理 对 多 个 站 点 的 集群 进行 统一 管理 
VM 管理 VM 创建 、 和 更新、 开关、 删除、 快照、 克隆 等 管理 


存储 管理 存储 Container 创建 、 管 理 


多 种 虚拟 化 层 管理 可 监控 管理 不 同 虚拟 平台 的 虚拟 化 资源 


网 络 可 视 化 拓扑 图 展现 网 络 相关 逻辑 纺 构 


> | mh? | mh? | | mh? | mh? | mY 


ee [Gr | m | 
n» |n» | n» | n» | i» | io | n» | n» 


Prism 自助 服务 通过 自助 服务 门户 申请 和 管理 资源 、 部 署 虚拟 机 
一 键 式 集中 化 升级 
一 键 式 运 维 监控 
PEREIRAN 性 能 警报 分 析 ae 


VM 监控 多 个 层面 和 维度 对 VM 进行 监控 (ee 


功 
Prism 搜索 
定制 化 面板 


mp 
CC 


容量 趋势 分 析 


扩容 推荐 
使 用 率 评 估 


即时 预测 


( 续 ) 


类 似 于 互联 网 搜索 的 全 局 搜索 ee 


根据 管理 员 需 求 自 定 义 面板 


一 键 式 规划 


内 的 系统 资源 消耗 趋势 


通过 机 器 学 习 智 能 分 析 包括 CPU、MEM 、 存 储 容量 在 


根据 容量 预测 和 资源 使 用 分 析 推 荐 扩容 解决 方案 


发 现 僵尸 VM 和 过 度 配置 VM 并 给 出 评估 建议 
根据 选择 不 用 应 用 场景 的 VM 模型 做 出 测算 ， 预 测 集 
群 的 资源 使 用 状态 ， 给 出 建议 


Qi. 在 各 个 Acropolis 软 件 版 本 中 均 已 包含 了 Prism 入 门 版 的 许可 ， 如 果 用 户 需 要 Prism 专 业 版 中 的 高 级 功能 ， 需 要 额外 购买 Prism 专 业 版 。 


附录 C 术语 表 


XX SER 


Acropolis Block Service 


Acropolis Container Service 


Access Control List 


Acropolis Command-Line Interface 


Active Directory 


Acropolis Dynamic Scheduling 


Acropolis File Service 
Acropolis HyperVisor 
App Mobility Fabric 
Acropolis OS 


Application Programming Interface 


Baseboard Management Controller 


Cisco Discovery Protocol 


Community Edition 


Consistency Group 


Customer Relationship Management 


Controller VM 


Direct Attached Storage 


Domain Name System 
Disk on Module 


Disaster Recovery 


Dynamic Resource Scheduling 


中 x 
Acropolis 块 服务 
Acropolis ZH oj 
访问 控制 列表 
Acropolis 命令 行 接口 
活动 目录 
Acropolis 动态 调度 
Acropolis 文件 服务 
Acropolis 虚拟 化 系统 
应 用 移动 性 染 构 
Acropolis 操作 系统 
应 用 程序 编程 接口 
基板 管理 控制 器 
Cisco 发 现 协议 
社区 版 
一 致 性 组 
客户 关系 管理 〈 系 统 ) 
Pell die METAL 
直 连 存储 
域名 系统 
板 载 便 盘 
灾难 恢复 / 容 灾 
动态 资源 调度 


-— 


专业 版 
包含 
包含 


包含 
包含 
包 


包 


D 


缩 “与 英文 全 称 中 x 

DSF Distributed Storage Fabric 分 布 式 存 储 染 构 

EC Erasure Coding 纠 删 码 

ERP Enterprise Resource Planning 企业 资源 计划 (系统) 

EULA End User License Agreement 最 终 用 户 许可 协议 

FC Fiber Channel 光纤 通道 

FT Fault Tolerance 容错 (功能 ) 

GPU Graphics Processing Unit DE Ab dE 

HBA Host Bus Adapter FALE ZX d Aca 

HCI HyperConverged Infrastructure 超 融 合 染 构 

HDD Hard Disk Drive 机 械 人 硬盘 

IO Input/Output 输入 / 输出 

IOPS Input/Output Operations Per Second 每 秒 读 写 操作 次 数 

IPAM IP Address Management IP 地 址 管理 

IPMI Intelligent Platform Management Interface AEP SE HiO 

ISCSI Internet Small Computer System Interface Internet 小 型 计算 机 系统 接口 

IT Information Technology 信息 技术 

KMS Key Management Service 密 钥 管理 服务 

LACP Link Aggregation Control Protocol 链 路 汇聚 控制 协议 
Link Layer Discovery Protocol 链 路 层 发 现 协议 

LUN Logical Unit Number 逻辑 单元 号 

MA Metro Availability 城 域 高 可 徘 性 

NAS Network Attached Storage 网 络 附 属 存 储 

NCLI Nutanix Command-Line Interface Nutanix 命令 行 接口 

NDFS Nutanix Distributed File System Nutanix 分 布 式 文件 系统 

NFS Network File System 网 络 文件 系统 

NTP Network Time Protocol 网 络 时 间 协 议 

NUMA Non Uniform Memory Access 韭 统一 内 存 访 问 (架构 ) 

ODX Offloaded Data Transfer ENER p t 

OU Organizational Unit 组 织 单 位 

OVS Open vSwitch 开放 虚拟 交换 机 

P2V Physical to Virtual 物理 到 虚拟 (转换) 

PD Protection Domain 保护 域 

PVS Provisioning Service Citrix IRS Ht 

QOS Quality of Service 服务 质量 

RAC Oracle Real Application Cluster Oracle 应 用 集群 

RAID Redundant Arrays of Independent Disks 独立 见 余 磁盘 阵列 

REST Representational State Transfer 表述 性 状态 传递 

RF Replication Factor TRAT 
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缩 “与 英文 全 称 中 x 
RPO Recovery Point Object 恢复 点 目标 
RTO Recovery Time Object 恢复 时 间 目 标 
SAN Storage Area Network 存储 区 域 网 络 
SDA SysTrack Desktop Assessment SysTrack œ Mi tEh (TE) 
SDN Software-Defined Network 软件 定义 网 络 
SDS Software-Defined Storage 软件 定义 存储 
SED Self-Encrypting Drive A D PA AE A 
SLA Service-Level Agreement 服务 等 级 协议 
Simple Network Management Protocol 简单 网 络 管理 协议 
SSD Solid State Drive 固态 人 硬盘 
SLP Spanning Tree Protocol 生成 树 协议 
TOR Top of Rack FILAR Tin 
V2V Virtual to Virtual 虚拟 到 虚拟 (转换 ) 
VAAI VMware vSphere Storage APIs Array Integration VMware 阵列 集成 存储 API 
VDI Virtual Desktop Infrastructure ETAR pf aE Rl AJ 
VLAN Virtual Local Area Network 虚拟 局 域 网 
VM Virtual Machine 虚拟 机 
VXLAN Virtual Extensible LAN 虚拟 扩展 局 域 网 
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